用Fluent实现MySQL到ODPS数据集成

---可以通过Fluentd将其它系统数据利用DHS导入到ODPS中

海量数据计算应该如何选择数据库 ---MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问

【大数据】  【mysql】  【RDS】  【数据库】  【odps】  【同步】   …

作者：方圆链接：https://www.zhihu.com/question/20010554/answer/15863274来源：知乎著作权归作者所有，转载请联系作者获得授权。 一、 PostgreSQL 的稳定性极强， Innodb 等引擎在崩溃、断电之类的灾难场景下抗打击能力有了长足进步，然而很多 MySQL 用户都遇到过Server级的数据库丢失的场景——mysql系统库是MyISAM的，相比之下，PG数据库这方面要好一些。

【大数据】  【架构】  【mysql】  【函数】  【性能】   …

《碟中谍》系列电影中，汤姆克鲁斯主演的亨特特工，无论什么情况，什么环境下都能够有惊无险的完成那些看似不可能的任务。

对于技术人员来说，如果也能像汤姆克鲁斯那样，不管什么mission impossible最后都能解决，那迎娶白富美，当上CTO，走向人生巅峰都不是问题！

“异地多活”看起来就是...

【分布式】  【架构】  【mysql】  【同步】  【数据同步】   …

　 同步发布：http://www.yuanrengu.com/index.php/mysqlsolvetimestamp.html 　 在使用mysql时，如果数据库中的字段类型是timestamp，默认为0000-00-00，会发生异常:Value ‘0000-00-00 00:00:00’ can not be represented as java.

【java】  【mysql】  【SQL】  【数据库】  【配置】  【同步】  【JDBC】   …

没有什么东西是一成不变的，包含我们的理想和生活！MySQL作为一个免费的开源的关系型数据库，深受大家喜爱，从最初的无人问津到当下的去IOE，都体现出了MySQL举足轻重的作用。今天我们就从淘宝的发展来阐述MySQL在大型网站下的架构演变史！ MySQL的可扩展性 架构的可扩展性往往和并发是息息相关，...

【架构】  【mysql】  【cluster】  【可扩展性】  【同步】   …

休息了一段时间后，技术忘记的差不多了，现在公司搞了一个MariaDB集群用docker跑的，我自己用三台docker容器尝试了一下搭建过程。docker和MariaDB这里不作太多的介绍，想了解的朋友可以去官网查看。

【mysql】  【数据库】  【cluster】  【集群】  【同步】  【BY】  【Server】   …

最近接触了好多对数据库由于binlog没有开启导致误删错删而无法恢复的情况，感觉binlog对于一个数据的库的数据安全性还是非常重要的。

【数据存储与数据库】  【mysql】  【函数】  【性能】  【日志】  【同步】  【Server】   …

MySQL 增量同步到 PostgreSQL

作者 digoal

日期 2016-10-20

标签 PostgreSQL , MySQL , 数据同步 , binlog

背景 接触到越来越多MySQL的数据库迁移到PostgreSQL的需求，整理了一些从MySQL增量迁移到PostgreS...

【PostgreSQL】  【mysql】  【HTTPS】  【http】  【同步】  【数据库迁移】   …

数据在任何一家公司里面都是最核心的资产，定期备份则是为了保证数据库出现问题的时候能够及时回滚到最近的备份点，将损失缩小到最小

这篇文章将会两部分来说明：1、mysql的定期备份；2、同步到其它服务器

mysql 备份

备份还原某个数据库

备份还原

# 导出数据库 /usr/bin/mysqldump -u root -ppwd database > d

【linux】  【监控】  【服务器】  【mysql】  【LOG】   …

开启 binary logs 功能 在 mysql 配置文件中配置 log-bin，重启 mysql my.cnf (on Linux/unix) or my.ini (on Windows) 例子: [client] ...

[mysqld] ... log-bin=mysql-bin (log_bin=/var/mydb/bin-log，指定 log 的路径，以及名称前缀) --- 一旦重启，Mysql 会自动创建新的二进制文件。

【安全】  【mysql】  【SQL】  【LOG】  【同步】  【Server】   …