搞定Minio+Nextcloud分布式云盘,最难的就是目录权限问题
前天使用minio作为Nextcloud的外接存储,使用nextcloud的应用插件挂载minio,但效果不尽人意,只能作为私人使用,无法做为一个解决方案用于企业多用户。
最近研究minio,我一直想用minio作为底层文件系统,在上面部署云盘,满足多用户使用。当然我也没空去写一个云盘程序来对接minio存储文件,于是我想到了将minio作为底层目录挂载,再将Nextcloud的文件存在minio目录下。
我用我的虚拟机来做这个实验:
首先创建minio服务
docker run -d -p 9000:9000 -p 9090:9090 --name minio \
-e "MINIO_ACCESS_KEY=minio" \
-e "MINIO_SECRET_KEY=****" \
-v /minio/data1:/data1 \
-v /minio/data2:/data2 \
-v /minio/data3:/data3 \
-v /minio/data4:/data4 \
-v /home/heyile/workspace/minio/config:/root/.minio \
minio/minio server /data1 /data2 /data3 /data4 \
--console-address ":9000" --address ":9090"
创建桶 mycloud,创建用户mycloud
将用户密码存储在~/.passwd-s3fs下,格式是username:password
安装s3fs程序,并挂载盘
ubuntu或kali安装s3fs
sudo apt install s3fs
安装完以后将桶mycloud挂载在指定目录,比如:
s3fs -o passwd_file=$HOME/.passwd-s3fs -o use_path_request_style -o url=http://localhost:9090 -o bucket=mycloud $HOME/workspace/mycloud -o use_xattr -o use_cache=$HOME/workspace/tmp -o allow_other -o ensure_diskfree=500
重点:一定要加-o use_xattr 才能让mycloud目录下的文件属性被修改,否则无法修改属性,nextcloud安装时会报错!
加上-o allow_other会让挂载目录权限变成777
挂载成功后会看到mycloud目录,就是我们挂载的minio的桶。
安装maradb和Nextcloud
使用docker安装,我就不赘述,直接贴出docker命令
docker run -d --name mydb \
-v /home/DockerData/mysql/data:/var/lib/mysql \
-v /home/DockerData/mysql/conf:/etc/mysql \
-v /home/DockerData/mysql/logs:/var/log/mysql \
--net nextcloud-mysql-net \
--restart=always \
-p 12306:3306 \
-e MYSQL_ROOT_PASSWORD=***** \
mariadb
装完mariadb后要创建数据库mycloud和用户,具体步骤详见我前天的文章。
接着安装NextCloud,注意NextCloud将程序建在本地盘,将数据建在Minio挂载盘:
docker run -d \
--name mycloud \
-v /home/DockerData/nextcloud:/var/www/html \
-v /home/DockerData/mycloud/data:/var/www/html/data \
-v /etc/localtime:/etc/localtime \
-p 80:80 \
--net nextcloud-mysql-net \
nextcloud
运行初始化以后,nextcloud安装成功,可以上传下载文件。


同时我们进入minio控制台,也可以看到minio的文件管理:

这样,基于minio的Nextcloud服务就部署完成!
总结:
使用minio作为nextcloud的底层,会浪费一些空间,但实现了分布式存储,而且把nextcloud的程序和数据分离开,也可以实现nextcloud的分布式部署。
这样,我们可以在多台服务器上分别部署nextcloud和minio为底层,然后再用nginx作为负载均衡,就可以实现强大的分布式网盘功能,理论上可以为无数人提供网盘服务,只要我们不断扩展分布式网盘服务器就可以。
在测试中发现Minio的挂载盘有个缺点,minio盘无法显示真实的存储容量,它的大小显示的是16E,所以一旦容量超出物理存储的容量,就会出现宕机的现象,对于这种情况,可以通过设置bucket的quota来限制容量爆满。