- 1粒子群算法调参支持向量回归进行预测（PSO-SVR）Python实现_pso-svr python
- 2分词及去停用词（可用作科研实验）python_python分词停用词库
- 3数据库中的算法实现_数据库算法实现
- 4Navicat 导入数据时报Incorrect datetime value: '0000-00-00 00:00:00.000000' 错误
- 5Flink-输出算子(Sink)使用_richsinkfunction
- 6记录:java.lang.Integer cannot be cast to java.lang.Long...【解决方案】
- 7IDER软件git使用技巧_ider根据git无法从远处数据库读取用http可以
- 8＜长篇文章！！＞数据结构与算法的重要知识点与概要总结 ( •̀ ω •́ )✧✧临近考试和查漏补缺的小伙伴看这一篇就都懂啦~_数据结构与算法的知识点
- 9TensorRT部署总结（一）
- 10深入掌握以太坊核心技术_mastering ethereum
FastDFS系统搭建_build software fast地址
赞
踩
手摸手教你搭建FasfDFS分布式文件系统
由于正在学习的分布式项目中用到了FastDFS文件系统，因为各种原因就只好手动搭建环境。搭建过程确实很复杂，我也是折腾了好长时间才解决的，看了网上的教程，但很少有直接就能搭建成功得博文教程，所以这里自己写了一个完成的教程，并附带了所需的配置文件。
需要注意的是Linux系统、版本的问题，我这里使用的是CentOS7的版本，如果大家搭建请尽量保证版本一致。
起步
1 2 3 4 5 | 1、下载Linux系统（以CentOS为例） [CentOS7-Minimal](http://isoredirect.centos.org/centos/7/isos/x86_64/CentOS-7-x86_64-Minimal-1804.iso) 2、安装SecureCRT 因为实际的服务器并不存在桌面，所以我们安装Minimal版本的CentOS即可，但是在CentOS的黑窗口中操作并不方便，所以下载SecureCRT操纵服务器。 |
安装CentOS
本例中用VMware安装的CentOS系统，在安装时需要注意一个问题：
如上图所示，在安装CentOS时不要创建新用户，设置个ROOT密码即可，这样登录进去系统后默认就是ROOT权限，避免了权限不够的问题。（登录用户名密码默认都是root）
1、登录系统并配置连接网络
输入命令：cd /etc/sysconfig/network-scripts/ && ls，编辑列表中的第一个文件（因为文件名称可能不相同）
将最后行的no改成yes即可
修改点击键盘的i键进入编辑模式，修改完成后按下ESC键，再输入:wq!保存退出即可；然后执行命令service network restart重启服务。
此时已经完成了CentOS的联网，输入命令ip addr查看服务器的IP地址（如果联网成功，会出现192.168.xx.xx类似这样的IP地址）：
这个IP地址即使此服务器的外网IP，即我们要用SecureCRT连接的服务器的IP
2、使用SecureCRT连接服务器
SecureCRT的使用方法不在说了，就是简单的创建一个连接，输入服务器的IP地址、账户、密码即可完成连接。
3、关闭CentOS7的防火墙
作为我们测试用的本地服务器，加一个防火墙实在是没有必要的，所以索性关闭防火墙。
输入命令：
1 2 3 | systemctl stop firewalld.service #停止firewall systemctl disable firewalld.service #禁止firewall开机启动 firewall-cmd --state #查看默认防火墙状态（关闭后显示notrunning，开启后显示running） |
环境准备
安装所需命令
1 2 3 4 5 6 7 8 | [root@localhost ~]# yum install make cmake gcc gcc-c++ [root@localhost ~]# yum install vim-enhanced [root@localhost ~]# yum install zip unzip [root@localhost ~]# yum install -y pcre pcre-devel [root@localhost ~]# yum install -y zlib zlib-devel [root@localhost ~]# yum install -y openssl openssl-devel [root@localhost ~]# yum install net-tools [root@localhost ~]# yum install git |
clone所需的安装文件
1 2 3 4 5 | GitHub地址： https://github.com/TyCoding/build-fastdfs [root@localhost ~]# git clone https://github.com/TyCoding/build-fastdfs.git [root@localhost ~]# mv build-fastdfs/* /root/ && rm -rf build-fastdfs [root@localhost ~]# cd software |
开始
安装libfastcommon
将libfastcommon-master.zip解压到/usr/local/fast目录下，并编译安装
1 2 3 | [root@localhost software]# unzip libfastcommon-master.zip -d /usr/local/fast/ [root@localhost software]# cd /usr/local/fast/libfastcommon-master/ [root@localhost libfastcommon-master]# ./make.sh && ./make.sh install |
由于libfastcommon安装好后悔自动将库文件拷贝至/usr/lib64目录下，又因为FastDFS程序引用/usr/lib目录，所以我们可以通过创建软连接的方式来解决FastDFS的引用路径问题，当然通过将/usr/lib64下的库文件拷贝到/usr/lib下也行。
1 2 3 4 | [root@localhost libfastcommon-master]# ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so [root@localhost libfastcommon-master]# ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so [root@localhost libfastcommon-master]# ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so [root@localhost libfastcommon-master]# ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so |
安装FastDFS
将FastDFS_v5.05.tar.gz解压到/usr/local/fast目录下
1 2 3 4 | [root@localhost libfastcommon-master]# cd ~/software [root@localhost software]# tar -zxvf FastDFS_v5.05.tar.gz -C /usr/local/fast/ [root@localhost software]# cd /usr/local/fast/FastDFS/ [root@localhost FastDFS]# ./make.sh && ./make.sh install |
因为FastDFS服务器脚本设置的bin目录为/usr/local/bin目录下，但是实际我们安装在usr/bin下面，所以我们要修改FastDFS配置文件中的路径，需要修改配置文件：/etc/init.d/fdfs_storaged以及/etc/init.d/fdfs_trackerd，修改方式如下：
输入命令：
1 2 3 4 5 6 7 8 | [root@localhost FastDFS]# vi /etc/init.d/fdfs_storaged --这里涉及到了vim的语法，进入这个文件的编辑页面后，直接将输入法切换至英文状态，输入 :%s+/usr/local/bin+/usr/bin --当输入完成上面的指令后直接回车会看到：7 substitutions on 7 lines，输入 :wq! --保存并退出 |
一定要注意的是，这里并不是在文件中增加这一行代码，如上图，我们是给vim输入了一串指令，这个指令的作用是批量修改一些代码，当回车后会显示：7 substitutions on 7 lines，然后我们输入:wq!保存并退出文件的编辑
同样的方式，修改/etc/init.d/fdfs_trackerd，输入命令
1 2 3 4 5 | [root@localhost FastDFS]# vi /etc/init.d/fdfs_trackerd :%s+/usr/local/bin+/usr/bin :wq! |
配置tracker
进入/etc/fdfs目录并复制一份tracker.conf.sample并命名为tracker.conf，并修改tracker.conf，将其中的base_path参数的值修改为/fastdfs/tracker，并使用makir -p /fastdfs/tracker创建两个目录
1 2 3 | [root@localhost FastDFS]# cd /etc/fdfs && ll [root@localhost fdfs]# cp tracker.conf.sample tracker.conf [root@localhost fdfs]# vi tracker.conf |
点击键盘的i键进入vim的编辑模式，如果编辑完成后要先点击键盘的ESC键退出vim的编辑模式再点击键盘的键:wq!直接会在左下角写入
1 2 3 | :wq! [root@localhost fdfs]# mkdir -p /fastdfs/tracker |
启动tracker：
1 | [root@localhost fdfs]# /etc/init.d/fdfs_trackerd start |
配置storage
进入/etc/fdfs目录，赋值一份storage.conf.sample并命名为storage.conf，并修改storage.conf
1 2 | [root@localhost fdfs]# cp storage.conf.sample storage.conf [root@localhost fdfs]# vi storage.conf |
修改如下几个参数：
1 2 3 | base_path=/fastdfs/storage store_path0=/fastdfs/storage tracker_server=192.168.148.131:22122 #这个IP地址是你服务器的IP，输入命令`ip addr`即可查看到服务器的IP |
保存退出并创建/fastdfs/storage目录
1 2 3 | :wq! [root@localhost fdfs]# mkdir /fastdfs/storage |
启动storage
1 | /etc/init.d/fdfs_storaged start |
查看tracker和storage是否启动成功
1 | ps -ef | grep fdfs |
出现如上的显示才证明tracker和storage都正常启动了。
注意 这个地方要吐槽一下啦，要是你输入ps -ef | grep fdfs出现的不是这三行，而是两行或其他，就证明肯定有一个服务没有启动成功，一般就是你的配置有错误；
那么你有下面两个选择来解决这一错误情况：
1、执行
/etc/init.d/fdfs_storaged stop和/etc/init.d/fdfs_trackerd stop关闭服务，然后先启动tracker服务再执行storage服务，一般就可以解决
2、如果上面的办法还是不行，就重新安装FastDFS（从新直接编译方法即可）；其次还要重新删除tracker.conf和storage.conf重新配置；最后再重新启动服务（尽量重启一下服务器）
如上我们就完成了FastDFS的配置。
测试文件上传
进入/etc/fdfs目录并复制一份client.conf.sample并命名为client.conf
1 2 | [root@localhost fdfs]# cp client.conf.sample client.conf [root@localhost fdfs]# vi client.conf |
编辑下列两项内容
1 2 | base_path=/fastdfs/tracker tracker_server=192.168.148.131:22122 #这个IP地址是你服务器的IP地址，输入命令`ip addr`即可查看到。不要盲目复制 |
下面使用fdfs_upload_file脚本进行文件上传操作。先创建测试文件，输入命令vi test.txt，回车后点击i键进入编辑模式，输入Hello TyCoding!，点击ESC键，输入:wq!保存并退出，通过
1 2 3 4 | [root@localhost ~]# vi test.txt Hello TyCoding! /usr/bin/fdfs_upload_file /etc/fdfs/client.conf ~/test.txt |
如果出现类似下面的返回地址证明上传成功
FastDFS与Nginx结合
解压nginx-1.6.2.tar.gz到/usr/local目录下；解压fastdfs-nginx-module_v1.16.tar.gz到/usr/local目录下，编译和安装
1 2 3 | [root@localhost ~]# cd ~/software [root@localhost software]# tar -zxvf nginx-1.6.2.tar.gz -C /usr/local/ [root@localhost software]# tar -zxvf fastdfs-nginx-module_v1.16.tar.gz -C /usr/local/fast/ |
进入/usr/local/fast/fastdfs-nginx-module/src/目录下，修改其中的config文件，把其中第四行的usr/local/include都改为/usr/include
编译nginx
1 2 | [root@localhost src]# cd /usr/local/ && ll [root@localhost local]# cd nginx-1.6.2 && ./configure --prefix=/usr/local/nginx --add-module=../fast/fastdfs-nginx-module/src/ |
正常情况下，会显示如下信息证明编译成功，因为这里需要为nginx添加fastdfs-nginx-module模块，和平常安装的nginx是不同的，如果不显示如下页面就重新进行编译
安装，并copy /usr/local/fast/fastdfs-nginx-module/src/mod_fastdfs.conf 到/etc/fdfs
1 2 3 4 5 | [root@localhost nginx-1.6.2]# make && make install [root@localhost nginx-1.6.2]# cd /usr/local/fast/fastdfs-nginx-module/src/ [root@localhost src]# cp /usr/local/fast/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/ [root@localhost src]# cd /etc/fdfs && ll [root@localhost fdfs]# vi mod_fastdfs.conf |
修改如下部分
1 2 3 4 | connect_timeout=10 tracker_server=192.168.148.131:22122 #IP地址还是根据自己的服务器IP地址来定 url_have_group_name = true store_path0=/fastdfs/storage |
赋值FastDFS里的2个文件，到/etc/fdfs目录中，创建一个软连接，在/fastdfs/storage文件储存目录下创建软连接，将其连接到实际存放数据的目录
1 2 3 | [root@localhost fdfs]# cd /usr/local/fast/FastDFS/conf/ && ll [root@localhost conf]# cp http.conf mime.types /etc/fdfs/ [root@localhost conf]# ln -s /fastdfs/storage/data/ /fastdfs/storage/data/M00 |
修改nginx的配置文件nginx-conf
1 2 | [root@localhost conf]# cd /usr/local/nginx/conf && ll [root@localhost conf]# vi nginx.conf |
修改如下部分
1 2 3 | location ~/group([0-9])/M00 {
ngx_fastdfs_module;
}
|
启动nginx
1 | [root@localhost conf]# /usr/local/nginx/sbin/nginx |
如果出现以上显示证明nginx启动成功，否者的话启动失败，要重新编译安装nginx，一般都是fastdfs-nginx-module模块注入到nginx失败。
以上我们已经完成了全部的配置，测试各个端口的启动情况，输入netstat -ntlp，可以看到如下信息：
出现上述信息证明各个配置都正常
通过http的方式访问上传文件
1 | [root@localhost conf]# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf ~/test.txt |
设置服务开机自启动
经过上面的环境配置，我们一共需要启动三个服务才能实现最终的效果，那么每次启动服务器都手动去启动这些服务未免显得太过于麻烦了，所以我们配置这些服务开机自启动即可：
1 | [root@localhost ~]# vi /etc/rc.d/rc.local |
向其中添加需要开机自启动服务的脚本
1 2 3 | /etc/init.d/fdfs_trackerd start /etc/init.d/fdfs_storaged start /usr/local/nginx/sbin/nginx |
其次，我们还要给rc.local文件赋予权限才能实现开机自启动
1 | [root@localhost ~]# chmod +x /etc/rc.d/rc.local |
输入命令reboot重启服务器，再输入netstat -ntlp查看当前启动的服务，可以看到storage, tracker, nginx三个服务都自启动了。
注意
参考文章：https://qq52o.me/2077.html
我也是根据上述文章中的介绍搭建的系统，但是并没有成功，于是我改变了其中的一些步骤（命令行），参看了网上其他的文章，最终成功搭建！
-
教程中使用的系统版本是CentOS7
-
如果你在配置tracker和storage完成后启动服务，两个服务并没有都启动，请先执行
xxx stop的命令关闭服务，然后按照先启动tracker再启动storage的顺序启动服务；如果还是没有启动成功，最好重新安装FastDFS（直接重新执行命令即可），重新配置相关的文件，然后重启服务器，再重启服务，一般就解决了。 -
如果你在安装nginx时添加
fastdfs-nginx-module模块时出现error，请重新编译nginx，重新配置相关的文件，一般就能解决了。
最后祝愿大家都能成功的搭建FastDFS系统。
