表示 进入内容 213049
« 先前的 10 新的记录 | 下一步 10 较早的记录 »
Displaying posts with tag: hdfs (reset)
sqoop同步mysql到hdfs

链接:http://pan.baidu.com/s/1gfHnaVL 密码:7j12 mysql-connector version 5.1.32 若在安装版本过程遇到些问题,可参考http://dbspace.

【mysql】  【hdfs】  【hadoop】  【Apache】  【配置】  【同步】  【Server】  【Create】   …

[获取更多]
sqoop搭建

sqoop版本1.99.7#此搭建过程在最后启动job的时候失败了,每个版本的差异性蛮大的。 版本下载链接:http://pan.baidu.com/s/1pKYrusz 密码:7ib5 搭建sqoop之前,已经配置好了hadoop和java的环境 当第一次启动后,KILL掉HADOOP进程后出现的各种问题,重启机器解决问题。

【java】  【mysql】  【hdfs】  【hadoop】  【Apache】  【eclipse】   …

[获取更多]
hadoop插件sqoop使用案例

sqoop是hadoop项目中一个插件,可以把分布式文件系统hdfs中内容导入到mysql指定表里面,也可以把mysql中内容导入到hdfs文件系统中进行后续操作。

测试环境说明: hadoop版本:hadoop-0.20.2 sqoop版本:sqoop-1.2.0-CDH3B4 java版本:jdk1.7.0_67 mysql版本:5.1.65

特别说明: 因为我安装的是hadoop-0.20.2版本,sqoop不支持这个版本,但是可以使用CDH3版本的hadoop,也可以通过copy相关文件,达到目的。

【mysql】  【hdfs】  【hadoop】  【path】   …

[获取更多]
Hive之 hive架构

                          Hive架构图 主要分为以下几个部分:

用户接口,包括 命令行CLI,Client,Web界面WUI,JDBC/ODBC接口等

中间件:包括thrift接口和JDBC/ODBC的服务端,用于整合Hive和其他程序。

【架构】  【mysql】  【hdfs】  【数据库】  【中间件】  【Server】   …

[获取更多]
Hadoop入门进阶课程11--Sqoop介绍、安装与操作

本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,博主为石山园,博客地址为 http://www.cnblogs.com/shishanyuan  。

【架构】  【mysql】  【hdfs】  【hadoop】  【数据库】  【配置】  【安全机制】   …

[获取更多]
Spark SQL 笔记

官方参考文档:

http://spark.apache.org/docs/2.1.0/sql-programming-guide.

【java】  【mysql】  【hdfs】  【SQL】  【Apache】  【spark】  【DataFrame】  【string】  【schema】   …

[获取更多]
通过虚拟机的hdfs读取本地mysql上的文件

读取时会出现一些问题 比如 虚拟机上无法ping 本地ip 还有就是需要在类中加 job.addFileToClassPath(new Path("/mysql-connector-java-5.1.

【数据存储与数据库】  【大数据】  【mysql】  【hdfs】  【path】  【string】  【static】  【JDBC】   …

[获取更多]
Sqoop:SQL与NoSQL间的数据桥梁

SQL处理二维表格数据,是一种最朴素的工具,NoSQL是Not Only SQL,即不仅仅是SQL。从MySQL导入数据到HDFS文件系统中,最简单的一种方式就是使用Sqoop,然后将HDFS中的数据和Hive建立映射。

【NOSQL】  【mysql】  【hdfs】  【SQL】  【path】  【配置】  【Hive】   …

[获取更多]
Centos 7部署大众点评CAT(二)——双服务器部署

在单机上部署CAT,只是在做实验,在生产环境则不可能只用单台服务器监控多个应用。 下面简单介绍一下双服务器的部署,各位有更多硬件资源作为监控服务端的朋友,如果对CAT集群有兴趣,可以参看这篇拙作。 资源准备: 服务器2台: 10.

【监控】  【服务器】  【mysql】  【hdfs】  【数据库】  【配置】   …

[获取更多]
Sqoop:SQL与NoSQL间的数据桥梁

SQL处理二维表格数据,是一种最朴素的工具,NoSQL是Not Only SQL,即不仅仅是SQL。从MySQL导入数据到HDFS文件系统中,最简单的一种方式就是使用Sqoop,然后将HDFS中的数据和Hive建立映射。

【NOSQL】  【mysql】  【hdfs】  【hadoop】  【SQL】  【配置】  【sqoop】   …

[获取更多]
表示 进入内容 213049
« 先前的 10 新的记录 | 下一步 10 较早的记录 »