一、基本理论 在mysql大数据处理上，水平分表技术是很常用的，但是分表技术带来了PHP处理的很大开销，为了解决这个弊端Mysql5.1以后以插件的方式增加了一个新的技术--分区技术。 分区技术是在逻辑层进行的水平分表，对于应用程序而言还是一张表，Mysql5.1有4种分区类型 1、RANGE：基于属于一个给定连续区间的列值，把多行分配给分区。

【大数据】  【mysql】  【函数】  【HASH】  【表达式】   …

1、慢查询 1.1、慢查询的作用 慢查询的主要作用是将执行超过一定时间的sql语句记录到慢查询日志文件，方便找出有性能问题的sql，然后我们可以针对这些sql进行分析调优。 和慢查询相关的参数有三个： long_query_time参数设置时间，执行时间大于该参数设置时间的sql都会被记录下来，支持小于1秒的设置，不过一般设置为1秒，主要原因时小于1秒的sql太多了，而且执行计划在大数据量情况下小于1秒的一般是没全表扫描的，而小数据量小于1秒的，即便全表扫描也问题不大，除非是执行频率非常高。

【大数据】  【mysql】  【性能】   …

1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。

2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from t where num is null可以在num上设置默认值0，确保表中num列没有null值，然后这样查询：select id from t where num=0

3.应尽量避免在 where 子句中使用!=或操作符，否则引擎将放弃使用索引而进行全表扫描。

【大数据】  【mysql】  【索引】  【表达式】   …

大纲

一、前言 二、Linux 运维大环境说明 三、Linux 运维学习思路 四、Linux 运维大方向说明 五、Linux 运维学习必看书籍推荐 六、Linux 运维实践内容简介

注，本博文主要用于交流与学习。

【linux】  【大数据】  【架构】  【监控】  【服务器】  【mysql】  【高可用】   …

备战京东双11，在配置MySQL的超时配置发现有很多地方可以设置。这么多超时的配置有什么影响，以及配置会有什么影响呢？ 1. JDBC超时设置 connectTimeout：表示等待和MySQL数据库建立socket链接的超时时间，默认值0，表示不设置超时，单位毫秒，建议30000 socketT...

【数据存储与数据库】  【大数据】  【mysql】  【SQL】  【http】  【数据库】   …

     高可用架构对于互联网服务基本是标配，无论是应用服务还是数据库服务都需要做到高可用。虽然互联网服务号称7*24小时不间断服务，但多多少少有一些时候服务不可用，比如某些时候网页打不开，百度不能搜索或者无法发微博，发微信等。

【大数据】  【架构】  【消息队列】  【服务器】  【mysql】  【模块】   …

问题详解 　　启动ambari-server出现

Caused by: java.lang.RuntimeException:java.lang.ClassNotFoundEception:com.mysql.jdbc.Driver           解决办法  　　说白了，就是你放置的mysql驱动包位置不完整。

【大数据】  【java】  【mysql】  【BY】  【JDBC】  【Driver】  【html】   …

问题详解 　　启动ambari-server出现

Caused by: java.lang.RuntimeException:java.lang.ClassNotFoundEception:com.mysql.jdbc.Driver           解决办法  　　说白了，就是你放置的mysql驱动包位置不完整。

【大数据】  【java】  【mysql】  【BY】  【JDBC】  【Driver】  【html】   …

  定制化大数据平台一键安装OS 大数据平台一键安装OS系列 大数据平台一键安装OS【定制化OS镜像制作】

搭建脚本篇 脚本命名随便，只要能看懂就行

镜像包说明 os1.1.iso 用于安装服务端和客户端操作系统 hdp.

【大数据】  【架构】  【mysql】  【path】  【yum】  【配置】   …

  定制化大数据平台一键安装OS 大数据平台一键安装OS系列 大数据平台一键安装OS【定制化OS镜像制作】

搭建脚本篇 脚本命名随便，只要能看懂就行

镜像包说明 os1.1.iso 用于安装服务端和客户端操作系统 hdp.

【大数据】  【mysql】  【yum】  【配置】  【rpm】  【脚本】   …