使用 rclone 同步 Google Drive 檔案

因為愈來愈多檔案存放在 Google Drive, 所以要考慮一個自動的機制將檔案同步回自己的電腦主機內.

• 安裝環境 : Alpine Linux 3.18
• 設定 cifs 掛上 NAS 目錄 : Alpine 設定 CIFS(SAMBA) 方式

• apk add rclone
  rclone version

  • 看結果

    pve-alpine3:~# rclone version
    rclone v1.62.2-DEV
    - os/version: alpine 3.18.6 (64 bit)
    - os/kernel: 6.1.84-0-lts (x86_64)
    - os/type: linux
    - os/arch: amd64
    - go/version: go1.20.11
    - go/linking: static
    - go/tags: none

• 安裝環境 : CentOS Linux release 7.7.1908 (Core)
• 安裝相關套件

  yum install curl unzip man-db

• 開始安裝 rclone

  curl https://rclone.org/install.sh |  bash

• 安裝成功後可以下以下指令確認版本

  rclone version

  • 看結果

    [root@ct-cloudsync ~]# rclone version
    rclone v1.50.1
    - os/arch: linux/amd64
    - go version: go1.13.4

• 依據 rclone 的說明, 如果使用量大, 最好申請自己 Google 帳號的 oAuth 方式來使用 rclone
• 申請 Google API oAuth 的方式 :
  1. 連上 Google Developer Console - https://console.developers.google.com/
  2. 選擇一個專案 (第一次使用請先建立專案) 看畫面
  3. 啟用 Google Drive API看畫面
  4. 啟用 Photos Library API看畫面
  5. 建立 oAuth 憑證看畫面
• 進行 rclone config 的建立

  rclone config

  1. n) New Remote (建立一個新的遠端連結定義)
  2. name> (設定這個遠端連結定義名稱) Exp. JonathanGooglePhotos
  3. Storage> (選擇 Cloud Storage 類型)
     1. 如果是 Google Drive 就要選 → 15 Google Drive
     2. 如果是要同步 Google 相簿 就要選 → 16 Google Photos
  4. client_id> (就直接輸入 oAuth 申請的 用戶端 ID)
  5. client_secret> (就直接輸入 oAuth 申請的 用戶端密碼)
  6. scope> (如果想雙向同步就選可讀寫 1, 若指向備份回本地端就選唯讀 2)
  7. root_folder_id> (如果整個 Drive 都要讀取就留空白, 因我定義這遠端連結是 Google 相簿, 所以先在瀏覽器上 Drive 點入 Google 相簿, 看到網址的 folder id) Exp. 我的雲端硬碟 → Google 相簿 網址 - https://drive.google.com/drive/u/0/folders/1RxkXxxxxxxxxxxxxxxxxxxxxxxxq7F_45Fxxxxxgs , 所以 Folder id 就是 1RxkXxxxxxxxxxxxxxxxxxxxxxxxq7F_45Fxxxxxgs
  8. service_account_file> (空白就好)
  9. Edit advanced config? (y/n) n
  10. Remote config Use auto config? (y/n) n ← 因為直接在 Linux Console 無法本機端有瀏覽器, 所以要選 n 產生認證網址
      1. 將出現的網址 https://accounts.google.com/o/oauth2/auth?access_type=offline&client_id=20xxxxxxxxxx.apps.googleusercontent.com&redirect_uri=urn%3Aietf%3Awg%3Aoauth%3A2.0%3Aoob&response_type=code&scope=https%3A%2F%2Fwww.googleapis.com%2Fauth%2Fdrive.readonly&state=a9exxxxxxxxxxxxxxxxxxxxxxxxxa823 貼上工作電腦的瀏覽器上
      2. 登入 Google 帳號
      3. 允許 rclone 的授權
      4. 將產生的授權碼複製下來 Exp. 4/_wxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxp9bRJw
  11. Enter verification code> (輸入瀏覽器產生的授權碼)
  12. Configure this as a team drive? (y/n) (個人的 Drive 就選 n)
  13. y/e/d> (如果呈現的設定都沒問題就選 y)
  14. q (離開 config 選單)

• 列出所有檔案

  rclone ls JonathanGooglePhotos:/ 

• 只列出目錄

  rclone lsd JonathanGooglePhotos:/ 

• 將所有檔案複製回本機 /nas_Photos/ 目錄內

  rclone copy -v JonathanGooglePhotos:/ /nas_Photos/GooglePhotos/

• 設定到 crontab

   vi /etc/crontab 

  :
  0 2 * * * root rclone copy --max-age 48h --no-traverse -v JonathanGooglePhotos:/ /nas_Photos/GooglePhotos/ 2>&1 | tee /tmp/syncGooglePhotos.log

• 重新啟動 crond

  systemctl restart crond

• 其實和開始安裝 rclone 的語法相同

  curl https://rclone.org/install.sh |  bash

• 更新後的結果

  Processing manual pages under /usr/share/man/sk...
  Purging old database entries in /usr/share/man/tr...
  Processing manual pages under /usr/share/man/tr...
  Purging old database entries in /usr/share/man/da...
  Processing manual pages under /usr/share/man/da...
  Purging old database entries in /usr/local/share/man...
  Processing manual pages under /usr/local/share/man...
  0 man subdirectories contained newer manual pages.
  0 manual pages were added.
  0 stray cats were added.
  0 old database entries were purged.
  
  rclone v1.54.0 has successfully installed.
  Now run "rclone config" for setup. Check https://rclone.org/docs/ for more details.

• https://rclone.org/drive/
• https://blog.csie.io/rclone-loves-google-drive.html
• https://forum.rclone.org/t/log-file-and-stats-simultaneously/4230/14