文件存储方案FastDFS

文件存储方案FastDFS

FastDFS介绍
• 用c语言编写的一款开源的轻量级分布式文件系统。
• 功能包括:文件存储、文件访问(文件上传、文件下载)、文件同步等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。
• 为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标。
• 可以帮助我们搭建一套高性能的文件服务器集群,并提供文件上传、下载等服务。
• FastDFS架构包括Client、Tracker server和Storage server。
• Client请求Tracker进行文件上传、下载,Tracker再调度Storage完成文件上传和下载。
• Client: 客户端,业务请求的发起方,通过专有接口,使用TCP/IP协议与Tracker或Storage进行数据交互。FastDFS提供了upload、download、delete等接口供客户端使用。
• Tracker server:跟踪服务器,主要做调度工作,起负载均衡的作用。在内存中记录集群中所有存储组和存储服务器的状态信息,是客户端和数据服务器交互的枢纽。
• Storage server:存储服务器(存储节点或数据服务器),文件和文件属性都保存到存储服务器上。Storage server直接利用OS的文件系统调用管理文件。
• Storage群中的横向可以扩容,纵向可以备份。

在这里插入图片描述
在这里插入图片描述

FastDFS运行流程:

1.商城上传图片到Client客户端;
2.客户端转发请求给调试存储服务器 Tracker;
3.调试存储服务器 Tracker查询哪个storage(存储文件)是空闲的;
4.storage(存储文件)给调试存储服务器 Tracker返回storage_ip;
5.调试存储服务器 Tracker将storage_ip转发给Client客户端;
6.Client客户端根据storage_ip找到存储服务器位置;
7.storage(存储文件)存储后将位置返回给Client客户端;
8.Client客户端将响应结果file_id转给商城;
9.商城将file_id存储保存到MySQL数据库中

开发人员需要操作的有1,8,9,其他由fastDFS完成
Storage群 横向是扩容 纵向是备份

在这里插入图片描述
FastDFS文件索引
• FastDFS上传和下载流程可以看出都涉及到一个数据叫文件索引(file_id)。
• 文件索引(file_id)是客户端上传文件后Storage返回给客户端的一个字符串,是以后访问该文件的索引信息。
• 文件索引(file_id)信息包括:组名、虚拟磁盘路径、数据两级目录、文件名等信息。
• 组名:文件上传后所在的 Storage 组名称。
• 虚拟磁盘路径:Storage 配置的虚拟路径,与磁盘选项store_path*对应。如果配置了store_path0则是M00,如果配置了store_path1则是M01,以此类推。
• 数据两级目录:Storage 服务器在每个虚拟磁盘路径下创建的两级目录,用于存储数据文件。
• 文件名:由存储服务器根据特定信息生成,文件名包含:源存储服务器IP地址、文件创建时间戳、文件大小、随机数和文件拓展名等信息
在这里插入图片描述

猜你喜欢

转载自blog.csdn.net/weixin_45905671/article/details/114985854