Planet MySQL

Displaying posts with tag: 分布式文件系统 (reset)

Nov

2017

书目片段

Posted by mysql-云栖社区 on Thu 16 Nov 2017 10:45 UTC
Tags:

Nagios, hadoop, MySQL, cdn, 数据库, 日志, 测试, 配置, 服务器, 负载均衡, 监控, 集群, 脚本, 分布式文件系统, 数据节点

第六章 lvs负载均衡集群

6.1 lvs 核心ipvs

6.1.1 安装ipvs

6.1.2 lvs客户端

6.2 故障隔离、失败切换框架keepalived

6.2.

【监控】【服务器】【mysql】【Nagios】【hadoop】【日志】【数据库】 …

[获取更多]

Nov

2017

MogileFS高可用分布式文件系统详解

Posted by mysql-云栖社区 on Wed 15 Nov 2017 23:40 UTC
Tags:

Nginx, Class, MySQL, 配置, 存储, 高可用, 模块, 分布式文件系统

一、关于MogileFS MongileFS是一个由Perl开发的分布式文件系统，遵循CAP理论，即Consistency：数据的一致性；Availability：数据的可用性；Tolerance of network Partition：数据的容错性；而这里的MongileFS满足了后俩者，也就是只满足数据的可用性和容错性，对于大型网站，数据的可用性和容错性要优先于数据的一致性。

【nginx】【mysql】【模块】【高可用】【配置】 …

[获取更多]

Nov

2017

【转载】架构师谈五层网站架构

Posted by mysql-云栖社区 on Sun 12 Nov 2017 04:07 UTC
Tags:

Web, Nginx, squid, MySQL, varnish, 数据库, 服务器, 淘宝, 文件服务器, 负载均衡, 高可用, 架构, 集群, 分布式文件系统, 单点故障

原文地址：http://toutiao.com/news/6232654162220286465/?tt_from=mobile_qq&utm_campaign=client_share&app=news_article&utm_source=mobile_qq&iid=3167618386&utm_medium=toutiao_ios 目前网站架构一般分为网页缓存层、负载均衡层、Web层、数据库层、文件服务器层。

【nginx】【架构】【服务器】【mysql】【高可用】【数据库】 …

[获取更多]

Nov

2017

hadoop插件sqoop使用案例

Posted by mysql-云栖社区 on Sat 11 Nov 2017 18:38 UTC
Tags:

hadoop, PATH, sqoop, MySQL, hdfs, 测试, 插件, 分布式文件系统

sqoop是hadoop项目中一个插件，可以把分布式文件系统hdfs中内容导入到mysql指定表里面，也可以把mysql中内容导入到hdfs文件系统中进行后续操作。

测试环境说明： hadoop版本：hadoop-0.20.2 sqoop版本：sqoop-1.2.0-CDH3B4 java版本：jdk1.7.0_67 mysql版本：5.1.65

特别说明：因为我安装的是hadoop-0.20.2版本，sqoop不支持这个版本，但是可以使用CDH3版本的hadoop，也可以通过copy相关文件，达到目的。

【mysql】【hdfs】【hadoop】【path】 …

[获取更多]

Nov

2017

大数据学习资源汇总

Posted by mysql-云栖社区 on Fri 10 Nov 2017 06:08 UTC
Tags:

sql, Apache, Google, hadoop, hbase, MySQL, 数据库, 分布式, 大数据, spark, 集群, 数据仓库, 高性能, 数据可视化, 分布式文件系统

当前，整个互联网正在从IT时代向DT时代演进，大数据技术也正在助力企业和公众敲开DT世界大门。当今“大数据”一词的重点其实已经不仅在于数据规模的定义，它更代表着信息技术发展进入了一个新的时代，代表着爆炸性的数据信息给传统的计算技术和信息技术带来的技术挑战和困难，代表着大数据处理所需的新的技术和方法，也代表着大数据分析和应用所带来的新发明、新服务和新的发展机遇。

【分布式】【大数据】【数据可视化】【mysql】 …

[获取更多]

Nov

2017

日均百万PV架构第三弹(分布内容为王)

Posted by mysql-云栖社区 on Thu 09 Nov 2017 12:20 UTC
Tags:

html, index, Nginx, log, server, service, access, MySQL, 配置, 架构, 分布式文件系统

接续接上篇缓存时代来临为蓝本,继续改造我们的百万级站点架构,这次我们拿之前存储静态内容的 nfs 开刀,众所周知 nfs 的多台集群节点下可能由于多重原因(磁盘io , 网络带宽, 并发场景),不适合做文件共享系统的基础结构.

【nginx】【架构】【mysql】【LOG】【配置】【Server】 …

[获取更多]

Nov

2017

细说五层网站架构

Posted by mysql-云栖社区 on Thu 09 Nov 2017 10:16 UTC
Tags:

Web, Nginx, squid, MySQL, varnish, 数据库, 服务器, 淘宝, 文件服务器, 负载均衡, 高可用, 架构, 集群, 分布式文件系统, 单点故障

目前网站架构一般分为网页缓存层、负载均衡层、Web层和数据库层、文件服务器层。我们可以依次用这五层对网站架构进行讨论，为了增强说服力，我将用如下三个并发较大的生产环境来说明。 q 电子商务网站（并发最大峰值2900，日PV500万左右） q 电子广告网站（并发最大峰值1500，日PV150万左右） q 大型CDN门户广告网站（并发最大峰值5000，日PV5000万左右） 1.

【nginx】【架构】【服务器】【mysql】 …

[获取更多]

Nov

2017

《互联网运营智慧》随书视频

Posted by mysql-云栖社区 on Thu 09 Nov 2017 10:03 UTC
Tags:

Blog, Nagios, hadoop, MySQL, CTO, 负载均衡, 高可用, 架构, 互联网, 脚本, 运营, 分布式文件系统

1、田逸0-前言下载处 2、田逸1 第一章到第四章下载 3、田逸2 第五章到第7章下载 4、田逸3 第8章moosefs分布式文件系统下载 5、田逸3 第9章 MySQL实战下载 6、田逸3 第10章云计算架构之hadoop 下载 7、田逸3 第11章网关服务下载 8、田逸3 第12...

【架构】【mysql】【Nagios】【hadoop】【高可用】【互联网】 …

[获取更多]

Nov

2017

mysql和mongodb对比互补

Posted by mysql-云栖社区 on Tue 07 Nov 2017 23:59 UTC
Tags:

mongodb, MySQL, 索引, 日志, 服务器, 性能, 存储, 磁盘, 分布式文件系统, mysql和mongodb对比互补

1、mysql没有必要存放所有的数据，尤其是分析、归纳、汇总的日志数据

2、mongodb的一个重要概念就是以空间换时间

3、MongoDB性能的一个关键点就是索引，索引是不是能有比较好的使用效率，索引是不是能够放在内存中，这样能够提升随机读写的性能。

【MongoDB】【服务器】【mysql】【性能】【日志】【索引】 …

[获取更多]

Oct

2017

为什么POLARDB是云计算2.0时代产品进化的关键里程碑？

Posted by mysql-云栖社区 on Thu 12 Oct 2017 16:35 UTC
Tags:

MySQL, 数据库, 云数据库, 性能, 阿里云, 性能优化, 安全, 高可用, 架构, 云栖社区, 加密, 容灾, 弹性伸缩, 分布式文件系统, 公有云

POLARDB是什么？ POLARDB是阿里云自主研发的新一代关系型数据库。POLARDB采用计算虚拟化、高速网络互联、分布式文件系统和块存储、数据库物理Replication等全方位的技术手段，是众多热点技术的集大成者。

【云栖社区】【安全】【架构】【性能优化】【阿里云】【mysql】【加密】 …

[获取更多]

Oracle MySQL Blogs

MySQL 其他链接