Planet MySQL

Displaying posts with tag: 分布式文件系统 (reset)

Nov

2018

Posted by mysql-云栖社区 on Wed 28 Nov 2018 06:45 UTC
Tags:

sql, image, RDS, MySQL, 数据库, 测试, 分布式, 性能, 高可用, 架构, 集群, 数据存储与数据库, 分布式文件系统, 云数据库POLARDB

现在做任何事情都要看投入产出比，对应到数据库上其实就是性价比。POLARDB作为一款阿里自研数据库，经常被问的问题是：性能怎么样？能不能支撑我的业务？价格贵不贵？很显然，在早期调研阶段，对稳定性、可靠性很难有量化的指标时，性能的好快就成了一个非常关键的决策因子。

【数据存储与数据库】【分布式】【架构】【mysql】【RDS】 …

[获取更多]

Nov

2018

云数据库POLARDB优势解读系列文章之①——10分钟入门

Posted by mysql-云栖社区 on Wed 28 Nov 2018 06:21 UTC
Tags:

sql, MySQL, 数据库, 配置, 存储, 架构, 集群, 数据存储与数据库, 逻辑复制, 分布式数据库, 分布式文件系统, 并行查询

什么是POLARDB POLARDB 是阿里云自研的下一代关系型分布式数据库，100%兼容MySQL，之前使用MySQL的应用程序不需要修改一行代码，即可使用POLARDB。 POLARDB在运行形态上是一个多节点集群，集群中有一个Writer节点（主节点）和多个Reader节点，他们之间节点间通过分布式文件系统（PolarFileSystem）共享底层的同一份存储（PolarStore）。

【数据存储与数据库】【架构】【mysql】【SQL】【数据库】 …

[获取更多]

Jan

2018

容器化RDS｜计算存储分离架构下的 IO 优化

Posted by mysql-云栖社区 on Thu 11 Jan 2018 08:14 UTC
Tags:

innodb, page, RDS, MySQL, 数据库, 测试, 存储, 容器, 架构, 表空间, 分布式文件系统

计算存储分离架构架构示意图如下：

存储层由分布式文件系统组成，以 Provisoner 的方式集成到 Kubernetes. 在我们看来, 计算存储分离的最大优势在于：将有状态的数据下沉到存储层，这使得 RDS 在调度时，无需感知计算节点的存储介质，只需调度到满足计算资源要求的 Node，数据库实例启动时，只需在分布式文件系统挂载 mapping 的 volume 即可，可以显著的提高数据库实例的部署密度和计算资源利用率。

【架构】【mysql】【innodb】 …

[获取更多]

Nov

2017

细说五层网站架构

Posted by mysql-云栖社区 on Tue 28 Nov 2017 05:50 UTC
Tags:

Web, Nginx, squid, MySQL, varnish, 数据库, 服务器, 淘宝, 文件服务器, 负载均衡, 高可用, 架构, 集群, 分布式文件系统, 单点故障

1.网页缓存层首先说网页缓存层，比如CDN租凭，其效果比公司自己部署Squid/Varnish要好，它们专业、价格低廉（比如：快网、蓝讯、阿里、腾讯）而且覆盖的城市更多，自己架设Squid/Varnish是次选。

【nginx】【架构】【服务器】【mysql】【高可用】【数据库】【web】 …

[获取更多]

Nov

2017

Web集群实现共享存储的架构演变及MogileFS

Posted by mysql-云栖社区 on Thu 23 Nov 2017 08:18 UTC
Tags:

html, Web, index, Nginx, log, Class, MySQL, 数据库, 配置, 存储, 负载均衡, 架构, 集群, 分布式文件系统, 分布式存储

本篇博客从Web集群中亟需解决的大容量存储问题引入，分析了几类常用的共享存储架构，重点解析了分布式存储系统的原理及配置实现； =================================================================== 1 共享存储的架构演变 2 分布式存储系统 2.

【nginx】【架构】【mysql】【LOG】【数据库】【web】 …

[获取更多]

Nov

2017

我们的网站压力究竟在哪里

Posted by mysql-云栖社区 on Wed 22 Nov 2017 14:20 UTC
Tags:

Web, memcached, Nginx, squid, MySQL, 数据库, 服务器, 淘宝, 文件服务器, 负载均衡, 高可用, 架构, 分布式文件系统, 应用服务器, 单点故障

目前网站架构一般分成网页缓存层、负载均衡层、 WEB层和数据库层，我其实一般还会多加一层，即文件服务器层，这样我们在后面的讨论过程中，我们可以依次用这五层对网站架构来进行讨论；这里为了更具有说服力，我将用三个并发较大的生产环境来说明下，一个是我现在维护的电子商务网站（并发最大峰值2900，日PV500万左右）、我目前维护的电子广告网站（并发最大峰值1500，日PV150万左右）、以前维护的大型CDN门户广告网站（并发最大峰值5000，日PV5000万左右）。

【nginx】【架构】【服务器】 …

[获取更多]

Nov

2017

mogilefs详解

Posted by mysql-云栖社区 on Wed 22 Nov 2017 12:02 UTC
Tags:

Nginx, yum, file, add, MySQL, 数据库, 配置, 存储, 高可用, 集群, 模块, 数据存储, 分布式文件系统, 数据节点, 分布式存储

分布式：分布式存储或分布式文件系统的概念：多台计算机每一台提供一定的存储空间存储数据，通过元数据服务器将数据均匀的存储在各个节点上元数据：描述数据的数据，主要是描述数据属性，用来支持如指示存储位置、资源查找、文件记录等功能分布式文件系统：可以直接挂载在系统上进行访问分布...

【nginx】【mysql】【模块】【高可用】【数据库】 …

[获取更多]

Nov

2017

CentOS 6.5 分布式文件系统之MogileFS工作原理及实现过程

Posted by mysql-云栖社区 on Tue 21 Nov 2017 12:07 UTC
Tags:

html, rpm, centos, Nginx, file, mariadb, MySQL, 数据库, 配置, 存储, 数据存储, 分布式文件系统

MogileFS是一套高效的文件自动备份组件，由Six Apart开发，广泛应用在包括LiveJournal等web2.0站点上。MogileFS由3个部分组成：第1个部分：是server端，包括mogilefsd和mogstored两个程序。

【nginx】【mysql】【数据库】【配置】【centos】【rpm】【Mariadb】 …

[获取更多]

Nov

2017

FastDFS介绍

Posted by mysql-云栖社区 on Mon 20 Nov 2017 11:32 UTC
Tags:

metadata, server, MySQL, 索引, 同步, 服务器, 高并发, 存储, 负载均衡, 分布式文件系统

FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。

【服务器】【mysql】【高并发】【负载均衡】【同步】【Server】 …

[获取更多]

Nov

2017

Hadoop项目实战－用户行为分析之应用概述（二）

Posted by mysql-云栖社区 on Mon 20 Nov 2017 08:58 UTC
Tags:

Web, hadoop, MapReduce, hbase, MySQL, hdfs, 数据库, 日志, 存储, 高可用, 集群, 模块, 数据存储, 分布式文件系统

1.概述　　本课程的视频教程地址：《项目整体概述》　　本节给大家分享的主题如下图所示：

　　下面我开始为大家分享第二节的内容——《项目整体概述》，下面开始今天的分享内容。 2.内容　　从本节开始，我们将进入到Hadoop项目的整体概述一节学习，本节课程为大家介绍的主要知识点有一下内容，如下图所示：

　　下面，我们首先来看看项目的整体流程，其流程如下图所示：

　　项目流程可以分为4个模块，他们分别是数据收集，集群存储，分析计算和结果处理。

【mysql】【hbase】【hdfs】 …

[获取更多]

Oracle MySQL Blogs

MySQL 其他链接