MaxCompute大数据计算服务，能提供快速、完全托管的PB级数据仓库解决方案，能够使用户经济且高效地分析处理海量数据。而用户往往之前使用了Hadoop实现大数据计算任务，在选择了阿里云大数据计算服务之后，如何从Hadoop向MaxCompute进行迁移就成为了一个需要面对的问题了。

【大数据】  【mysql】  【hdfs】  【hadoop】  【VPC】  【集群】   …

我们在搭建数仓的时候，有多个业务库需要将数据上云，如果手动来配置这些数据采集的任务，那将会是一个非常繁重的工作。DataWorks中的数据集成提供了整库迁移的功能，来方便大家快速进行数据上云，并可在配置任务的过程中，对目标表添加表前缀，助力于数仓的快速搭建。

【云栖社区】  【mysql】  【配置】  【Image】  【同步】  【aliyun】   …

信息摘要： 扩充数据源，数据库的跨源查询、自定义SQL的复杂SQL支持，新增图表适用客户： 面向全网用户版本/规格功能： 1. 支持数据源种类新增Hive及Oracle数据源 2.数据建模支持MaxCompute、MySQL、Oracle三种数据源之间的跨源数据库连接 3.自定义SQL支持同源跨库、子查询/UNION/长SQL的复杂场景。

【LBS】  【mysql】  【Oracle】  【SQL】  【数据处理】   …

 有一些时候需要生成一个自增的id，以便能和mysql的表对应进行同步。参考了相关文档，写了一个python版的udf。 # coding=utf-8 from odps.udf import annotate @annotate("*->bigint") class AutoIncrement(...

【python】  【mysql】  【odps】  【同步】  【class】  【UDF】  【MaxCompute】   …

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效的数据同步功能。

【云栖社区】  【linux】  【python】  【mysql】  【公有云】  【配置】  【DRDS】   …

创建数据集是报表分析的基础，合理建模可以达到事半功倍的效果哦！

【PostgreSQL】  【mysql】  【函数】  【SQL】  【钉钉】  【同步】  【分区表】  【报表】   …

QuickBI支持多种数据源连接，添加数据源是数据分析展示的第一步，下面来详细介绍一下产品数据源支持情况！

【云栖社区】  【大数据】  【PostgreSQL】  【mysql】  【Oracle】  【ECS】  【数据库】  【数据分析】   …

针对不同数据库间数据实时同步难的问题，日前，阿里云宣布推出混合云数据同步一站式解决方案，便于广大云产品用户实现实时数据同步的混合云支持，更为方便的是，该功能让本地Oracle也能实现与云上数据库的实时同步。

【云栖社区】  【大数据】  【mysql】  【Oracle】  【数据库】  【配置】   …

在过去三年里产生的数据量比以往四万年的数据量还要大。大数据可以来自方方面面，从日常生活购物到社交网络，从地理位置定位到在线视频都会有大量的数据。云计算的蓬勃发展，进一步催生了大数据的价值。廉价的存储和计算，高效的海量数据处理，我们已经进入了“大数据时代”。

【大数据】  【mysql】  【RDS】  【性能】  【日志】  【数据库】   …

大家好，这里和大家分享的是DataWorks数据集成中测试连通性失败的排查思路。与测试连通性成功与否的相关因素有很多，本文按照多个因素逐步排查，最终解决问题，希望大家以后再遇到此类问题，请参考此文，相信能够顺利解决您的问题。

【大数据】  【mysql】  【RDS】  【数据库】  【配置】  【测试】   …