近期阿里云重磅推出新的数据分析引擎Data Lake Analytics，Data Lake Analytics是Serverless化的交互式联邦查询服务。无需ETL，使用标准SQL即可分析与集成对象存储(OSS)、数据库

【大数据】  【架构】  【PostgreSQL】  【mysql】  【数据库】  【数据仓库】  【数据分析】   …

之前公司的测试环境，刚开始自己搭建虚拟机，然后安装redis，nginx，mq,mysql,tomcat,jdk,marven,还有jekins.前面些还算好点,jekins还是比较麻烦的。

【nginx】  【分布式】  【大数据】  【redis】  【docker】  【服务器】  【mysql】  【镜像】   …

爬虫安装前准备工作：大快大数据平台安装完成、zookeeper、redis、elasticsearch、mysql等组件安装启动成功。

【大数据】  【java】  【mysql】  【配置】  【JDBC】  【Elasticsearch】  【zookeeper】  【开发框架】   …

我们经常遇到一张表里面保存了上亿甚至过十亿的记录，这些表里面保存了大量的历史记录。 对于这些历史数据的清理是一个非常头疼事情，特定场景下分区表可以很好的解决，但分区又有哪些坑或注意事项呢？

【大数据】  【mysql】  【数据迁移】  【索引】  【分区表】  【存储过程】   …

随着互联网发展和消费者习惯的变化，包括批发、零售及一些生活服务业在内的实体流通企业，由于经营方式较为传统，多以物业租金收益或联营扣点方式为主要盈利模式，无法从商业经营本身获利，这局限了其根据消费者需求对经营模式进行转型创新的探索。

【大数据】  【mysql】  【程序员】  【云栖大会】  【面向对象】  【电商】   …

高性能MYSQL笔记 1. MYSQL逻辑结构

MYSQL逻辑结构有三层，分别为  1. 连接/线程处理：实现连接处理，授权认证，安全等  2. 服务层：该层主要有缓存，解析，处理，优化以及跨存储引擎如存储过程，触发器，视图等  3. 存储引擎：主要负责数据读取和存储。

【大数据】  【mysql】  【innodb】  【线程】  【数据库】  【数据仓库】   …

Telling Tomcat to save session records in MySQL 此部分内容摘自 MySQL cookbook 3th。具体内容不做翻译，哈哈，懒 The default Tomcat default session storage mechanism uses temporary files.

【大数据】  【mysql】  【Apache】  【tomcat】  【Server】  【JDBC】  【Driver】   …

Mysql SQL优化方法

1.单库表别太多，一般保持在200以下为宜. 2.尽量避免SQL中出现运算，例如select a+5 from A，让DB功能单一化 3.表设计尽量小而精，能用5个字段就不要用6个（除非业务上使用增加冗余字段来提升性能）。

【大数据】  【mysql】  【性能】  【SQL】  【云存储】  【索引】   …

为了释放更多技术红利，进一步普惠广大客户和开发者，阿里云7月上旬宣布数据传输服务(Data Transmission Service,简称DTS) 数据同步功能降价，最高降价幅度高达40%。中国大陆，最低单价低至400元/月，跨境专线同步，最低单价低至1590元/月。

【大数据】  【架构】  【mysql】  【公有云】  【高可用】  【数据迁移】   …

在mysql中，有个函数叫“group_concat”，平常使用可能发现不了问题，在处理大数据的时候，会发现内容被截取了， 其实MYSQL内部对这个是有设置的，默认不设置的长度是1024，如果我们需要更大，就需要手工去修改 详细说明如下：

用了group_concat后，select里如果使用了limit是不起作用的. 用group_concat连接字段的时候是有长度限制的，并不是有多少连多少。

【大数据】  【mysql】  【函数】  【排序】  【BY】   …