Planet MySQL

Displaying posts with tag: 阿里技术协会 (reset)

Mar

2018

Posted by mysql-云栖社区 on Tue 20 Mar 2018 05:33 UTC
Tags:

update, server, MySQL, 索引, RocksDB, MyRocks, 数据存储与数据库, 阿里技术协会

# 概述 MyRocks中RocksDB作为基于快照的事务引擎，其在事务支持上有别于InnoDB，有其自身的特点。在早期的月报[[myrocks之事务处理]](http://mysql.taobao.org/monthly/2016/11/02/) 中，我们对锁的实现有过简单的分析，本文会以一些例子来介绍MyRocks是如果来加锁解锁的。

# 锁类型 MyRocks早期只支持排他锁，

【数据存储与数据库】【mysql】【阿里技术协会】【Server】【索引】 …

[获取更多]

Mar

2018

一小时完成基于阿里云流计算的实时计算系统搭建

Posted by mysql-云栖社区 on Mon 05 Mar 2018 10:12 UTC
Tags:

html, sql, image, varchar, MySQL, logstash, 配置, 架构, 监控, 阿里技术协会, aliyun, 流计算, 实时计算

目前，实时计算越来越被广泛应用，比如实时ETL、实时报表、实时大屏展示等一些监控预警和在线系统的场景。企业对计算速度和消息更新速度要求越来越高。开源框架中，Storm，Sparks，Flink等在企业生产中大量投入使用，但是开发相对复杂，需要对接各种框架api、sdk等，另外人力成本相对较高。

【架构】【监控】【mysql】【SQL】【阿里技术协会】 …

[获取更多]

Feb

2018

[区块链」比特币的全球交易数据监测

Posted by mysql-云栖社区 on Fri 02 Feb 2018 03:27 UTC
Tags:

image, MySQL, 存储, 阿里技术协会, 区块链, 比特币

![image.png](http://ata2-img.cn-hangzhou.img-pub.aliyun-inc.com/da4ecb04c2aa86a22900c20d87fbc753.png) 最近一段时间区块链挺火的，不管是涨是跌，牵动人心。

每当涨的时候，总有人后悔为啥没有早买，每当跌时，也能听见”背后有没有机构做空“疑问。

当看到有人在买卖中受打击而顿挫时，当看到有

【mysql】【阿里技术协会】【Image】【存储】【区块链】 …

[获取更多]

Feb

2018

自建hadoop集群迁移到EMR之数据迁移篇

Posted by mysql-云栖社区 on Fri 02 Feb 2018 02:57 UTC
Tags:

sql, hadoop, RDS, Hive, MySQL, hdfs, 数据库, 同步, 配置, 集群, 阿里技术协会, 数据迁移, 脚本, 安全组, emr

自建集群要迁移到EMR集群，往往需要迁移已有数据。本文主要介绍hdfs数据和hive meta数据如何迁移。

# 前置已按需求创建好EMR集群。

# 迁移hdfs数据主要依靠distcp,核心是打通网络，确定hdfs参数和要迁移内容，测速，迁移。 ## 网络需要自建集群和EMR各个节点网络互通。同为VPC网络只需要同一个安全组，不同的安全组需要设置安全组互通。

如果

【mysql】【RDS】【hdfs】【hadoop】【SQL】 …

[获取更多]

Nov

2017

RocksDB TransactionDB事务实现分析

Posted by mysql-云栖社区 on Fri 24 Nov 2017 02:56 UTC
Tags:

Java, facebook, transaction, commit, MySQL, 事务, RocksDB, 2PC, 阿里技术协会, TransactionDB

## 基本概念

#### 1. LSN (log sequence number)

RocksDB中的每一条记录(KeyValue)都有一个LogSequenceNumber(后面统称lsn)，从最初的0开始，每次写入加1。该值为逻辑量，区别于InnoDB的lsn为redo log物理写入字节量。

这个lsn在RocksDB内部的memtable中是`单调递增`的，在WriteA

【java】【mysql】【阿里技术协会】【Transaction】【facebook】【事务】 …

[获取更多]

Oct

2017

Amazon Aurora 读后感

Posted by mysql-云栖社区 on Mon 23 Oct 2017 07:05 UTC
Tags:

log, page, commit, MySQL, 数据库, 存储, 数据存储与数据库, 阿里技术协会, 分布式系统与计算

几个月前，AWS在SIGMOD 17上发表了《Amazon Aurora: Design Considerations for High Throughput Cloud-Native Relational Databases》，详细解读了Aurora的背景、设计思想以及效果。即使本人不搞关系数据库，也没有读过MySQL内核源码，读完后也觉得

【数据存储与数据库】【分布式系统与计算】【mysql】【LOG】【阿里技术协会】【数据库】 …

[获取更多]

Oct

2017

MySQL之最

Posted by mysql-云栖社区 on Mon 23 Oct 2017 07:05 UTC
Tags:

innodb, varchar, page, lock, https, MySQL, 索引, 日志, 配置, 数据存储与数据库, 阿里技术协会, 表空间

# 最大和最小 1. 一个表里最多可有1017列（在MySQL 5.6.9 之前最大支持1000列）。虚拟列也受限这个限制。 2. 一个表最多可以有64个二级索引。 3. 如果innodb_large_prefix打开，在InnoDB表DYNAMIC或COMPRESSED列格式下，索引前缀最大支持前3072字节；如果不打开的话，在任意列格式下，最多支持前767字节。这个限制既适用于前缀索

【数据存储与数据库】【mysql】【innodb】【HTTPS】【日志】 …

[获取更多]

Aug

2017

Go database/sql 教程

Posted by mysql-云栖社区 on Fri 25 Aug 2017 06:57 UTC
Tags:

postgresql, sql, database, db, go, MySQL, 数据库, 架构, 阿里技术协会

Go使用SQL与类SQL数据库的惯例是通过标准库[database/sql](http://golang.org/pkg/database/sql/)。这是一个对关系型数据库的通用抽象，它提供了标准的、轻量的、面向行的接口。不过`database/sql`的包文档只讲它做了什么，却对如何使用只字未提。快速指南远比堆砌事实有用，本文讲述了`database/sql`的使用方法及其注意事项。

【架构】【PostgreSQL】【Go】【mysql】【SQL】 …

[获取更多]

Aug

2017

MySQL replication partial transaction

Posted by mysql-云栖社区 on Thu 10 Aug 2017 02:56 UTC
Tags: