當我們將 S3 bucket 掛到 EC2 instance 時(詳細設定筆記請見:如何掛載 AWS S3 到 AWS EC2 Instance - 環境安裝部份如何掛載 AWS S3 到 AWS EC2 Instance - 掛載及卸載部份 ),若將 EC2 instance 重開機,S3 bucket 是不會自動掛載上去的,這時我們可以寫一個 Script 加入排程來讓 EC2 instance 重開機能夠自動掛載 S3 bucket。

詳細步驟如下:

Step 1:編寫 automount-s3 的 shell script

$ vim automount-s3

script 內容:

sudo mkdir /mnt/s3-drive
/usr/bin/s3fs <bucketname> <mount-point> -o allow_other

Step 2:將 automount-s3 script 移至 /usr/sbin

$ sudo mv automount-s3 /usr/sbin

Step 3:更改 automount-s3 script 權限

$ sudo chown root:root /usr/sbin/automount-s3
$ sudo chmod +x /usr/sbin/automount-s3

Step 4:將 automount-s3 script 加入 crontab 設定在重新開機時自動執行

$ crontab -e

crontab 內容

@reboot /usr/sbin/automount-s3

完成以上步驟我們就可以讓 EC2 instance 在重新開機時自動掛載 S3 bucket,我們可以實際重新開機測試:

sudo reboot

重新開機後,我們可以用 df -h 來確認是否有自動掛載:

$ df -h
Filesystem      Size  Used Avail Use% Mounted on
/dev/xvda1      7.9G  1.3G  6.3G  17% /
udev            288M  8.0K  288M   1% /dev
tmpfs           119M  172K  118M   1% /run
none            5.0M     0  5.0M   0% /run/lock
none            296M     0  296M   0% /run/shm
s3fs            256T     0  256T   0% /mnt/s3-drive

以上就是如何讓 AWS EC2 Instance 在開機時自動掛載 AWS S3 Bucket 的簡易筆記~

本篇為筆記為如何掛載 AWS S3 到 AWS EC2 Instance 的後續內容,請先閱讀 如何掛載 AWS S3 到 AWS EC2 Instance - 環境安裝部份 後再閱讀本篇筆記。

架構網站服務時,Storage 的規劃也是重要的一環,而 AWS S3 就是一個蠻好的 Storage 服務。

一般常見的做法我們會透過 AWS 提供的 API 來存取 S3 上的檔案,但這樣做並不直覺,而且要通常要將原本存取檔案的程式寫法改成用 S3 API 存取檔案的寫法,有可能會需要修改許多支程式。

所以便有人萌生了將 S3 掛載到 EC2 Instance 的想法,就跟我們買一顆大容量的硬碟裝在電腦上一樣,讓我們的網站服務能夠像在同一部機器存取檔案一樣容易。(其實概念就像我們在實體機器上使用 NFS 來掛載網路硬碟一樣)

掛載細節如下:(請確認已開好 S3 bucket,且開好 IAM user 權限,且完成環境安裝)

Step 1:新增 s3fs passwd 檔案

$ touch /etc/passwd-s3fs

Step 2:編輯 s3fs 檔案

$ vim /etc/passwd-s3fs

Step 3:填入設定 S3 bucket 時的 bucket name 及設定 IAM user 時得到的 access key id、secret access key

bucketName:accessKeyID:secretAccessKey

Step 4:更改 s3fs 檔案權限

$ chmod 640 /etc/passwd-s3fs

Step5:新增 S3 bucket 所要掛載的位置

$ mkdir /mnt/s3-drive

Step6:將 S3 bucket 掛載上去

$ /usr/bin/s3fs <bucket-name> /mnt/s3-drive -o allow_other

當完成上述步驟我們就已經將 S3 bucket 掛載到 EC2 的 /mnt/s3-drive 了 我們可以用 df -h 來確認:

$ df -h
Filesystem      Size  Used Avail Use% Mounted on
/dev/xvda1      7.9G  1.3G  6.3G  17% /
udev            288M  8.0K  288M   1% /dev
tmpfs           119M  172K  118M   1% /run
none            5.0M     0  5.0M   0% /run/lock
none            296M     0  296M   0% /run/shm
s3fs            256T     0  256T   0% /mnt/s3-drive

恭喜!EC2 Instance 多了 256T 的空間了!

若想要卸載 S3 bucket 指令如下:

$ fusermount -u /mnt/s3-drive

以上就是如何掛載 AWS S3 到 AWS EC2 Instance 的簡易筆記~

架構網站服務時,Storage 的規劃也是重要的一環,而 AWS S3 就是一個蠻好的 Storage 服務。

一般常見的做法我們會透過 AWS 提供的 API 來存取 S3 上的檔案,但這樣做並不直覺,而且要通常要將原本存取檔案的程式寫法改成用 S3 API 存取檔案的寫法,有可能會需要修改許多支程式。

所以便有人萌生了將 S3 掛載到 EC2 Instance 的想法,就跟我們買一顆大容量的硬碟裝在電腦上一樣,讓我們的網站服務能夠像在同一部機器存取檔案一樣容易。(其實概念就像我們在實體機器上使用 NFS 來掛載網路硬碟一樣)

環境安裝細節如下:(請確認已開好 S3 bucket,且開好 IAM user 權限)

Step 1:登入 EC2 後使用 sudo 權限

$ sudo -s

Step 2:先更新 apt-get

$ apt-get update

Step 3:安裝必要套件

$ apt-get install make gcc g++ curl libxml2 libxml2-dev libssl-dev libcurl3 libcurl4-gnutls-dev openssl pkg-config

Step 4:進入 /usr/local/src 資料夾

$ cd /usr/local/src

Step 5:下載 fuse

$ wget http://sourceforge.net/projects/fuse/files/fuse-2.X/2.9.2/fuse-2.9.2.tar.gz/download -O fuse-2.9.2.tar.gz

Step 6:解壓縮 fuse

$ tar -xzvf fuse-2.9.2.tar.gz

Step 7:進入 fuse-2.9.2 資料夾

$ cd fuse-2.9.2

Step 8:編譯安裝 fuse

$ ./configure --prefix=/usr
$ make
$ make install

Step 9:將 fuse 加入 ubuntu kernel

$ modprobe fuse

Step 10:確認 fuse 是否安裝完成

$ pkg-config --modversion fuse

Step 11:進入 /usr/local/src 資料夾

$ cd /usr/local/src

Step 12:下載 s3fs

$ wget http://s3fs.googlecode.com/files/s3fs-1.71.tar.gz

Step 13:解壓縮 s3fs

$ tar -xzvf s3fs-1.71.tar.gz

Step 14:進入 s3fs-1.71 資料夾

$ cd s3fs-1.71

Step 15:編譯安裝 s3fs

$ ./configure --prefix=/usr
$ make
$ make install

完成以上步驟,就可以在 EC2 的 Ubuntu Instance 安裝好可掛載 S3 的環境,關於掛載及卸載部份請見如何掛載 AWS S3 到 AWS EC2 Instance - 掛載及卸載部份

Fukuball

我是林志傑,網路上常用的名字是 Fukuball。我使用 PHP 及 Python,對機器學習及區塊鏈技術感到興趣。 https://www.fukuball.com

Co-Founder / Head of Engineering at OurSong

Taipei, Taiwan