Community journal

The latest from the MySQL community

Ideas, releases, practical guides, and perspectives from the people building with MySQL.

Follow the feed
Showing entries 1 to 3 of 3 « Previous | Next »
Displaying posts with tag: 离线计算 (reset)
Nov
20
2017
Azkaban的架构（三）
Posted by mysql-云栖社区 on Mon 20 Nov 2017 03:14 UTC
Tags:

Azkaban的架构       Azkaban是一种类似于Oozie的工作流控制引擎，可以用来解决多个Hadoop（或Spark等）离线计算任务之间的依赖关系问题。 也可以用其代替crontab来对周期性任务进行调度，并且更为直观，可靠，同时提供了美观的可视化管理界面。

【大数据】  【架构】  【服务器】  【mysql】  【数据库】  【web】   …

[获取更多]
Jul
18
2017
基于HybridDB for MySQL的企业ODS方案
Posted by mysql-云栖社区 on Tue 18 Jul 2017 04:13 UTC
Tags:

随着DT时代的到来，数据的价值日益凸显。企业积累的数据越来越多，数据库的规模也达到成百上千个实例，数据的规模更可能达到上百TB甚至PB级。如何以合理的成本管理并维护海量实例，利用尽可能短的时间窗口进行挖掘分析，成为各个企业IT管理中的核心问题。

【大数据】  【架构】  【mysql】  【性能】  【数据库】  【数据仓库】   …

[获取更多]
Oct
29
2016
高并发简单解决方案————redis队列缓存+mysql 批量入库(ThinkPhP)
Posted by mysql-云栖社区 on Sat 29 Oct 2016 09:13 UTC
Tags:

源码地址：https://github.com/Tinywan/PHP_Experience 问题分析

问题一：要求日志最好入库；但是，直接入库mysql确实扛不住，批量入库没有问题，done。【批量入库和直接入库性能差异】 问题二：批量入库就需要有高并发的消息队列，决定采用redis list 仿真实现，而且方便回滚。

【php】  【redis】  【消息队列】  【mysql】  【LOG】  【数据库】   …

[获取更多]