Nextcloud加密备份到腾讯云COS或阿里云OSS

写在前面

根据前文《从0开始安装Nextcloud》搭建了自己的Nextcloud网盘之后,有的小伙伴就会有疑问:如果硬盘损坏了怎么办?

本文提出的解决方案是将文件数据备份到云,这里衍生出来的另一个问题就是,既然备份到云,那么为什么不直接上传到云呢?其实是可以的,但安全性很难保证。

那备份到云的安全性又如何保证呢?这就是本文要解决的问题。

本文旨在解决两个问题:

1、放在本地,硬盘坏了怎么办?

2、放在云上,数据安全性怎么保障?

实现原理

1、Nextcloud有一个功能叫“服务器端加密”,开启后用户上传的文件都会被加密。

*注意:开启后新上传的才会被加密

2、将阿里云OSS或者腾讯云COS挂载到本地文件系统

3、将Nextcloud中加密的文件数据同步到挂载的远程目录

操作步骤

本文其实是通过将腾讯云COS或阿里云OSS挂载到本地文件系统之后进行管理的,具体的挂载步骤可参考《挂载阿里云OSS到本地当远程磁盘》和《挂载腾讯云COS到本地当远程磁盘》。

本文的内容是从上述文章完成后,即已经将阿里云OSS或腾讯云COS挂载到本地/files之后开始的。

1、开启Nextcloud的“服务器端加密”

在Nextcloud的 设置 -> 管理 -> 安全 ->服务器端加密 中开启。

2、启用加密模块

在Nextcloud的 应用 -> Default encryption module -> 启用

3、注销登陆重新登录,以初始化你的加密密钥

4、安装rsync

apt install rsync

5、同步data文件到/files(排除加密文件)

rsync -av --exclude "files_encryption" /webdata/nextcloud/data/ /files/

至此,文件已经成功同步到云上了,而因为我们没有上传密钥,因此实际上我们没有泄漏任何有效的资料。

*注意:是使用定时任务还是手动触发同步,需要各位看官自己去研究

注意事项

1、用户的私钥和解密用户文件所需的所有其他密钥保存在 data/<user>/files_encryption ,需要用户手动备份

2、私钥和解密存储在系统范围的外部存储中的文件所需的所有其他密钥保存在data/files_encryption,需要用户手动备份

3、*如果上述的密钥丢失,可能导致用户无法找回自己的文件

参考资料

1、Nextcloud Encryption configuration

2、rsync

Nextcloud安装后的安全与设置警告

在上篇文章《从0开始安装Nextcloud》之后,我们得到了一个全新安装的Nextcloud网盘。

但如果我们这个时候打开网盘的 设置 -> 管理 -> 概览 页面,我们可以看到有很多的警告。

本文的目的,就是提供解决警告的基本办法。

问题及方案

1、PHP 的安装似乎不正确,无法访问系统环境变量。getenv(“PATH”) 函数测试返回了一个空值。 请参照安装说明文档 中的 PHP 配置说明查阅您服务器的PHP配置信息,特别是在使用 php-fpm 时。

编辑/etc/php/7.2/fpm/pool.d/www.conf文件,查找到:

;env[HOSTNAME] = $HOSTNAME
;env[PATH] = /usr/local/bin:/usr/bin:/bin
;env[TMP] = /tmp
;env[TMPDIR] = /tmp
;env[TEMP] = /tmp

修改为:

env[HOSTNAME] = $HOSTNAME
env[PATH] = /usr/local/bin:/usr/bin:/bin
env[TMP] = /tmp
env[TMPDIR] = /tmp
env[TEMP] = /tmp

并重启PHP-FPM,问题解决。

service php7.2-fpm restart

2、PHP 内存限制低于建议值 512MB。

编辑/etc/php/7.2/fpm/pool.d/www.conf文件,查找到:

php_admin_value[memory_limit]

将此项修改为:

php_admin_value[memory_limit] = 512M

并重启PHP-FPM,问题解决。

service php7.2-fpm restart

3、内存缓存未配置,为了提升使用体验,请尽量配置内存缓存。更多信息请参见文档。

安装PHP的APCU扩展,并重启PHP-FPM

apt install php-apcu
service php7.2-fpm restart

编辑Nextcloud安装目录下的config/config.php文件,在文件倒数第二行加入:

'memcache.local' => '\OC\Memcache\APCu',
'memcache.distributed' => '\OC\Memcache\APCu',

4、数据库丢失了一些索引。blablablabla…

切换到Nextcloud安装目录下,执行:

sudo -u www-data php occ db:add-missing-indices

5、数据库中的一些列由于进行长整型转换而缺失。blablablabla…

切换到Nextcloud安装目录下,执行:

sudo -u www-data php occ db:convert-filecache-bigint

6、该实例缺失了一些推荐的 PHP 模块。为提高性能和兼容性,我们强烈建议安装它们。

安装列出的扩展并重启PHP-FPM

apt install php-intl php-imagick
service php7.2-fpm restart

参考资料

1、从0开始安装Nextcloud

2、Installation on Linux

从0开始安装Nextcloud

为什么要自建网盘?

相信大家都有存储东西的需求,但是随着国内网盘环境的恶化,只能说是没有最差只有更差的体验。出于这一点,我们选择自建网盘。

为什么要选择Nextcloud?

开源网盘比较友好的只有三款:SeafileownCloudNextcloud。结合我自身的需求和这三款网盘的友好度综合考虑之后,只能说:NextCloud Yes!

自建网盘的安全性

涉密不上网,上网不涉密,这是基本常识。

同时,安全和便利是相对的,安全就很难便利,便利就很难安全。

因此其中的度只能自己把握。我的网盘是搭建在家里的家庭服务器上,为了保证一定的便利性,只能够牺牲一定的安全性,通过Ngrok将它穿透出来,使得外网可以访问。

开始操作

先提出一个基本概念,为了从0开始,本文直接从Vultr新建了一台Ubuntu Server 18.04进行操作。

1、新机器第一步当然是:更新软件

sudo apt-get update && sudo apt-get upgrade

2、安装Nginx和PHP-FPM

sudo apt-get install nginx php-fpm

3、创建网站目录,本文为/webdata

sudo mkdir /webdata

4、下载Nextcloud文件,到官网获取下载地址,下载到/webdata,并解压

cd /webdata
wget https://download.nextcloud.com/server/releases/nextcloud-18.0.1.zip
unzip nextcloud-18.0.1.zip

如果提示 Command 'unzip' not found,那么就先安装unzip之后再解压文件包

sudo apt-get install unzip

解压完成后,/webdata目录下会生成一个nextcloud目录,因此我们的Nextcloud安装文件夹为/webdata/nextcloud,这个地址我们下一步修改Nginx配置文件时需要用到

5、配置Nginx,推荐在/etc/nginx/conf.d/中新建一个nextcloud.conf,推荐配置内容如下:

upstream php-handler {
    server unix:/var/run/php/php7.2-fpm.sock;
}

server {
    listen 80;
    listen [::]:80;
    server_name pan.mateor.cn;
    return 301 https://$server_name:443$request_uri;
}

server {
    listen 443 ssl http2;
    listen [::]:443 ssl http2;
    server_name pan.mateor.cn;

    ssl_certificate /cert/fullchain.pem;
    ssl_certificate_key /cert/privkey.pem;

    #add_header Strict-Transport-Security "max-age=15768000; includeSubDomains; preload;" always;
    add_header Referrer-Policy "no-referrer" always;
    add_header X-Content-Type-Options "nosniff" always;
    add_header X-Download-Options "noopen" always;
    add_header X-Frame-Options "SAMEORIGIN" always;
    add_header X-Permitted-Cross-Domain-Policies "none" always;
    add_header X-Robots-Tag "none" always;
    add_header X-XSS-Protection "1; mode=block" always;

    fastcgi_hide_header X-Powered-By;

    root /webdata/nextcloud;

    location = /robots.txt {
        allow all;
        log_not_found off;
        access_log off;
    }

    location = /.well-known/carddav {
      return 301 $scheme://$host:$server_port/remote.php/dav;
    }
    location = /.well-known/caldav {
      return 301 $scheme://$host:$server_port/remote.php/dav;
    }

    client_max_body_size 512M;
    fastcgi_buffers 64 4K;

    gzip on;
    gzip_vary on;
    gzip_comp_level 4;
    gzip_min_length 256;
    gzip_proxied expired no-cache no-store private no_last_modified no_etag auth;
    gzip_types application/atom+xml application/javascript application/json application/ld+json application/manifest+json application/rss+xml application/vnd.geo+json application/vnd.ms-fontobject application/x-font-ttf application/x-web-app-manifest+json application/xhtml+xml application/xml font/opentype image/bmp image/svg+xml image/x-icon text/cache-manifest text/css text/plain text/vcard text/vnd.rim.location.xloc text/vtt text/x-component text/x-cross-domain-policy;

    location / {
        rewrite ^ /index.php;
    }

    location ~ ^\/(?:build|tests|config|lib|3rdparty|templates|data)\/ {
        deny all;
    }
    location ~ ^\/(?:\.|autotest|occ|issue|indie|db_|console) {
        deny all;
    }

    location ~ ^\/(?:index|remote|public|cron|core\/ajax\/update|status|ocs\/v[12]|updater\/.+|oc[ms]-provider\/.+)\.php(?:$|\/) {
        fastcgi_split_path_info ^(.+?\.php)(\/.*|)$;
        set $path_info $fastcgi_path_info;
        try_files $fastcgi_script_name =404;
        include fastcgi_params;
        fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
        fastcgi_param PATH_INFO $path_info;
        fastcgi_param HTTPS on;
        # Avoid sending the security headers twice
        fastcgi_param modHeadersAvailable true;
        # Enable pretty urls
        fastcgi_param front_controller_active true;
        fastcgi_pass php-handler;
        fastcgi_intercept_errors on;
        fastcgi_request_buffering off;
    }

    location ~ ^\/(?:updater|oc[ms]-provider)(?:$|\/) {
        try_files $uri/ =404;
        index index.php;
    }

    location ~ \.(?:css|js|woff2?|svg|gif|map)$ {
        try_files $uri /index.php$request_uri;
        add_header Cache-Control "public, max-age=15778463";
        add_header Referrer-Policy "no-referrer" always;
        add_header X-Content-Type-Options "nosniff" always;
        add_header X-Download-Options "noopen" always;
        add_header X-Frame-Options "SAMEORIGIN" always;
        add_header X-Permitted-Cross-Domain-Policies "none" always;
        add_header X-Robots-Tag "none" always;
        add_header X-XSS-Protection "1; mode=block" always;
        access_log off;
    }

    location ~ \.(?:png|html|ttf|ico|jpg|jpeg|bcmap)$ {
        try_files $uri /index.php$request_uri;
        access_log off;
    }
}

*注意:上述配置中,需要修改pan.mateor.cn为你自己的网盘地址,需要修改/cert/fullchain.pem/cert/privkey.pem为你的证书地址,需要修改/webdata/nextcloud/为你的Nextcloud安装文件夹。

*注意:申请证书可参考《使用Certbot签发Let’s Encrypt泛域名证书

6、重新载入Nginx配置

sudo nginx -s reload

7、对网站文件夹进行授权

sudo chown www-data:www-data /webdata/ -R

现在,使用浏览器打开我们的网站,会发现出现一些错误,原因是一些Nextcloud需要的扩展我们没装。

8、参照提示安装扩展

sudo apt-get install php-zip php-xml php-mbstring php-gd php-curl php-mysql

9、重新启动PHP-FPM

sudo service php7.2-fpm restart

刷新浏览器页面,发现已经进入了安装界面。

10、安装Mysql

sudo apt-get install mysql-server

11、创建Nextcloud的Mysql账户(依次执行)

mysql -u root
create user nextcloud;
create database nextcloud;
grant all on nextcloud.* to nextcloud;

*注意:这一步我懒得设置密码,出于安全考虑,应该设置密码。

12、填写对应信息,进行安装

写在最后

至此,Nextcloud就安装完成了。

Nextcloud有对应的Mac、Windows、iOS、Android应用,可以让我们非常便捷地对网盘进行管理。也可以使用任何支持webdav的文件管理器来管理它,这也是为什么我选择它的原因。

参考资料

1、Nextcloud推荐的Nginx配置

2、使用Certbot签发Let’s Encrypt泛域名证书