大批量处理excel文件到ODPS中方案 前言

最近所做的项目需要将近五千个excel文件导入到ODPS，并且excel文件内容格式全部不一样。 刚接到需求时特别的懵，不过工作还是要做的，首先通过查询dataworks中文档来看怎么实现该需求，通过文档了解到只支持csv、txt等格式进行单个上传，然后就开始着手做。

【大数据】  【mysql】  【RDS】  【ECS】  【odps】   …

现在做任何事情都要看投入产出比，对应到数据库上其实就是性价比。POLARDB作为一款阿里自研数据库，经常被问的问题是：性能怎么样？能不能支撑我的业务？价格贵不贵？很显然，在早期调研阶段，对稳定性、可靠性很难有量化的指标时，性能的好快就成了一个非常关键的决策因子。

【数据存储与数据库】  【分布式】  【架构】  【mysql】  【RDS】   …

阿里云RDS支持TokuDB引擎，具有高压缩，高写入性能，读性能和InnoDB差不多。本文详解Percona MySQL5.7.23（包含TokuDB引擎）二进制的搭建，以及使用RDS备份文件恢复数据和搭建GTID同步到自建Percona MySQL5.7.23的过程。

【linux】  【mysql】  【RDS】  【数据库】  【yum】  【配置】  【SSL】   …

双十一就要来了，全世界都为其疯狂，但是在双十一抢购中经常会出现几万人抢一个红包或者很多人共同购买一个商品的情况，这就引发了一个数据库比较担心的场景----高并发。作为历届双十一重要保障之一的云数据库RDS部门，从参数优化、链路访问、弹性扩容、架构设计等方面应对高并发场景（如秒杀、百万人抢单等），保障双十一顺利进行。

【数据存储与数据库】  【安全】  【架构】  【mysql】  【RDS】   …

特点：费用极低的Discuz!量身打造的入门级架构说明：之所以采用ECS自建MYSQL数据库而不用RDS是因为RDS存储引擎禁用了MyISAM，而Discuz!的表结构是基于MyISAM存储引擎的，其他网站系统不依赖MyISAM的话可以把数据库主机替换成RDS。

【互联网产品及应用】  【php】  【架构】  【服务器】  【mysql】  【RDS】   …

一、引言 目前网站的一些业务数据存在数据库中，这些数据往往需要做进一步的分析，如：需要根据一些日志数据关联分析，或者需要进行一些如机器学习的分析。在阿里云上，目前E-Mapreduce能满足这种分析的需求。

【mysql】  【RDS】  【hadoop】  【Apache】  【配置】  【Maven】  【spark】   …

概述 对于大部分的企业，数据一般存在两个地方，一个是业务数据库，一个是日志。一般来讲，数据库数据容量有限，对于历史标记删除的记录一般会做定时清理，但是这些数据往往还是很有价值的。数据库计算能力也有限，如果要做一些数据分析，则会浪费宝贵的计算资源。

【架构】  【mysql】  【RDS】  【hbase】  【日志】  【数据处理】   …

DataWorks添加数据源典型问题可分为连通性问题、参数问题、权限问题三类。 连通性问题 连通性问题主要体现为测试连通性失败。

问题现象：添加MySQL数据源时，网络类型选择为经典网络，点击测试连通性时失败报错：测试连接失败，测试数据源联通性失败，连接数据库失败，数据库连接串…异常消息：Communications link failure.

【redis】  【MongoDB】  【mysql】  【RDS】  【防火墙】   …

mysql使用RDS做数据主从读写分离。在使用的过程中发现部分业务对其他服务以来严重。但是由于系统不是采用微服务的架构，造成部分数据插入数据库后，后续操作读取数据库没有查询到前面插入的数据。查看阿里云服务器找到了一个解决方案：即在sql语句前增加/FORCE_MASTER/ 注释。

【云栖社区】  【架构】  【mysql】  【RDS】  【日志】  【数据库】   …

本期头条 百位云计算专家齐聚湖畔大学阿里云MVP全球闭门会聚焦数字化转型

小桥流水、小亭古乐，阿里云MVP全球闭门会在充满国风韵味的湖畔大学开始。湖畔大学名称源于阿里巴巴创业所在地杭州湖畔花园小区，目前已经成为培养新一代企业家的重要基地。

【mysql】  【RDS】  【cdn】  【API】  【实名认证】  【云服务】   …