最近做一个oracle项目迁移工作，跟着spark架构师学着做，进行一些方法的总结。 　　1、首先，创建SparkSession对象（老版本为sparkContext） 　　val session = SparkSession.builder().appName("app1").getOrCreate() 　　2、数据的更新时间配置表，选用mysql,就是说每次结果数据计算写入mysql后，还会将此次数据的更新时间写入数据配置表。

【mysql】  【Oracle】  【配置】  【同步】  【string】   …

-------------------------------------------------------------------------------------------------正文-----------------------------------...

【mysql】  【线程】  【同步】  【分区表】  【plugin】  【myisam】   点击查看原文>

简介

MySQL Replication为MySQL用户提供了高可用性和可扩展性解决方案。本文介绍了MySQL Replication的主要发展历程，然后通过三个参数rpl_semi_sync_master_wait_point、sync_binlog、sync_relay_log的配置简要分析了MySQL半同步的数据一致性。

MySQL Replication的发展

在2000年，MySQ

【mysql】  【SQL】  【线程】  【高可用】  【源码】  【events】   …

3月10日，2017阿里云网站行业热点问题和解决方案线下研讨会在上海举行。在本次研讨会上，阿里云数据库团队产品专家王义成（花名挚尤）针对于大型网站的数据库架构设计以及阿里云ApsaraDB所提供的服务管理和解决方案进行了深入介绍。

【redis】  【架构】  【监控】  【MongoDB】  【阿里云】  【mysql】   …

利用xtrabackup备份恢复MySQL [toc] 一、在主库上操作 安装xtrabackup # yum -y install http://www.

【服务器】  【mysql】  【数据库】  【同步】   点击查看原文>

我们知道RabbitMQ可以配置成Queue做主从复制（按照官方的说法叫配置mirror queue），对master queue的写操作会被复制到其他slave上去（也就是复制到mirror queue上去）。

【mysql】  【SQL】  【配置】  【同步】  【Server】  【rabbitmq】  【存储】   …

其他相关链接

Ubuntu 安装jdk：[链接] Ubuntu安装eclipse：[链接] Ubuntu下安装mysql与mysql workbench：[链接] Ubuntu配置tomcat9：[链接]

1.先安装jdk，详情见链接 2.下载eclipse.tar.gz安装包（官网下载） 3.把下载好的安装包复制到/usr目录下

先

【java】  【mysql】  【ubuntu】  【windows】  【eclipse】  【配置】   …

3月23日，阿里云宣布MySQL企业版公测。通过创新性地引入分布式一致性协议，这款新品有效解决了数据在极端灾难发生时的可靠性问题，特别适用于对数据安全有强需求的金融企业。本文将介绍这款MySQL的特性、功能及适用场景。

【分布式】  【阿里云】  【mysql】  【数据库】  【数据安全】  【电商】   …

-------------------------------------------------------------------------------------------------记录文----------------------------------...

【mysql】  【测试】  【同步】  【binlog】  【存储过程】   点击查看原文>

半同步复制（semisynchronous replication）MySQL使用广泛的数据复制方案，相比于MySQL内置的异步复制它保证了数据的安 全，本文从主机在Server层提交事务开始一直到主机确认收到备机回复进行一步步解析，来看MySQL的半同步复制是怎么保证数 据安全的。本文基于MySQL 5.6源码，为了简化本文只分析DML的核心的事务处理过程，并假定事务只涉及innodb存储引擎。

【mysql】  【innodb】  【函数】  【线程】  【模块】   …