背景 某电信项目中采用HBase来存储用户终端明细数据，供前台页面即时查询。HBase无可置疑拥有其优势，但其本身只对rowkey支持毫秒级的快速检索，对于多字段的组合查询却无能为力。针对HBase的多条件查询也有多种方案，但是这些方案要么太复杂，要么效率太低，本文只对基于Solr的HBase多条件查询方案进行测试和验证。

【架构】  【mysql】  【hbase】  【集群】  【solr】   …

Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具。本文介绍如何使用sqoop将数据从Mysql导入到HBase。从成本的角度考虑，针对没有hadoop集群的用户，重点介绍单机运行sqoop的配置和参数。

【mysql】  【hbase】  【hadoop】  【Apache】  【配置】  【集群】  【同步】   …

文章介绍了海航生态科技舆情大数据平台的容器化改造经验，包括初期技术架构、应用容器化、架构迁移、持续发布与部署。

海航舆情监控系统能够为海航集团内部提供监控网络舆情信息，对负面信息、重大舆情及时预警，研判具体舆情或者某一舆情专题事件的发展变化趋势，生成图标报告和各种统计数据，提高舆情工作效率和辅助领导决策。

【分布式】  【大数据】  【架构】  【mysql】  【hbase】   …

  数据库作为业务的核心，在整个基础软件栈中是非常重要的一环。近几年社区也是新的方案和思想层出不穷，接下来我将总结一下近几年一些主流的开源数据库方案，其背后的设计思想以及适用场景。本人才疏学浅如有遗漏或者错误请见谅。

【分布式】  【PostgreSQL】  【NOSQL】  【mysql】  【hbase】  【性能】   …

从这篇文章开始，笔者将会在接下来很长时间里整理记录一个相对独立的知识领域－数据库事务，之所以忽然有这个想法，说来也是一种机缘巧合。本来是单纯计划写写HBase行级事务模型的具体实现的，但是在周末一不小心看了HBasecon2017里面一个talk之后就一发不可收拾了。

【分布式】  【mysql】  【hbase】  【数据库】  【消息中间件】  【read】   …

关系数据库管理系统(RDBMS)

　　MySQL：世界最流行的开源数据库; PostgreSQL：世界最先进的开源数据库; Oracle 数据库：对象-关系型数据库管理系统。 框架 Apache Hadoop：分布式处理架构，结合了 MapReduce(并行处理)、YARN(作业调度)和HDFS(分布式文件系统); Tigon：高吞吐量实时流处理框架。

【分布式】  【大数据】  【数据可视化】  【mysql】  【hbase】   …

数据库作为业务的核心，在整个基础软件栈中是非常重要的一环。近几年社区也是新的方案和思想层出不穷，接下来我将总结一下近几年一些主流的开源数据库方案，其背后的设计思想以及适用场景。本人才疏学浅如有遗漏或者错误请见谅。

【分布式】  【PostgreSQL】  【NOSQL】  【mysql】  【hbase】  【性能】   …

引言 　　大凡集群系统的性能、压力测试，都要通过监控系统进行收集整理。其中ganglia是集群监控最常用的工具之一。它与Hadoop生态圈结合的非常好，且性能优良，不会对系统本身性能造成影响。 　　Ganglia是UC Berkeley发起的一个开源集群监视项目，包含gmond、gmetad两个服务，以及一个web展示前端。

【监控】  【mysql】  【hbase】  【性能】  【数据库】   …

http://www.centos.org/download/ http://search.cpan.org/  安装mysql需要perl  http://search.cpan.org/~bingos/perl-5.

【大数据】  【java】  【mysql】  【hbase】  【hadoop】  【Oracle】  【Apache】  【spring】   …

史上最全“大数据”学习资源整理 2016-05-17 Hadoop技术博文

　　当前，整个互联网正在从IT时代向DT时代演进，大数据技术也正在助力企业和公众敲开DT世界大门。当今“大数据”一词的重点其实已经不仅在于数据规模的定义，它更代表着信息技术发展进入了一个新的时代，代表着爆炸性的数据信息给传统的计算技术和信息技术带来的技术挑战和困难，代表着大数据处理所需的新的技术和方法，也代表着大数据分析和应用所带来的新发明、新服务和新的发展机遇。

【分布式】  【大数据】  【mysql】   …