S3にアップロードした画像のサムネイルを自動で生成する（後編）

前回、写真・画像ファイルを格納するS3バケットと、サムネイル画像を作成する処理コードを書いたのですが、画像編集に必要なPillowライブラリがLambda上ではロードできずに終わってしまいました。

[ERROR] Runtime.ImportModuleError: Unable to import module 'lambda_function': No module named 'PIL' Traceback (most recent call last):

今回はLambda上で追加ライブラリを読み込んで実行できるようにします。

前編はこちら

Pythonの画像処理ライブラリ（Pillow）を準備
AWS Lambdaにライブラリを追加
1. Lambda関数のライブラリとして登録
2. Lambda関数にレイヤー設定追加
動作確認
1. 写真・画像ファイルのアップロード
2. 自動生成されたサムネイルを確認

Pythonの画像処理ライブラリ（Pillow）を準備

AWS Lambdaはサーバレスで実行されますが、裏側ではAmazonLinux2のインスタンス上で実行されているようですので、AmazonLinux2上でライブラリを準備する必要があります。

というわけで、EC2を使ってAmazon Linux2のインスタンスを一時的に立ち上げてライブラリの準備を行います。

Amazon Linux 2の環境を準備

EC2を使ってAmazon Linux 2のインスタンスを作ります。

このEC2インスタンスは、Pythonで使うライブラリを集めるために一時的に使うAmazonLinuux2環境ですので、インスタンスサイズは無料枠の t2.micro でよいです。ライブラリの作成が終わったら用済みとなりますので消してOKです。

インスタンスの作り方が分からない方はこちら

作り方が分からない方は、こちらの記事を参考にしてみてください。この記事ではUbuntuで構築しましたが、Ubuntuを選択するところでAmazon Linux 2を選択すればほぼ流れは一緒です。

AmazonLinux2上での作業

ここからはAWS管理コンソールを一旦離れて、今作ったAmazonLinux2の仮想マシンを使って画像処理ライブラリを作成していきます。

Python 3.8 インストール

AmazonLinux2のインスタンスが作成できたら、SSHで接続します。

AmazonLinux2の初期ユーザは、ec2-userです。

ログインできたら、Python をインストールします。この記事執筆時点で最新の3.8で作りました。

必要なパッケージを追加
$ sudo yum install -y libtiff-devel libjpeg-devel libzip-devel freetype-devel lcms2-devel libwebp-devel tcl-devel tk-devel

Python 3.8 インストール
$ sudo amazon-linux-extras install -y python3.8

バージョン確認します。どちらも無事に3.8系が入りました。

Pillowライブラリ取得

pythonフォルダを作成して、その中に一式入手します。

Successfully installed Pillow-8.3.X が表示されれば完了です。

現在位置確認
$ pwd
/home/ec2-user

Pillowライブラリ取得
$ mkdir python
$ pip3.8 install Pillow -t python
Collecting Pillow
  Downloading https://files.pythonhosted.org/packages/c5/f7/3084336272c2f1539ab36a117be4acf3131b967ff3a60e0ace06db151a7f/Pillow-8.3.1-cp38-cp38-manylinux_2_5_x86_64.manylinux1_x86_64.whl (3.0MB)
    100% |????????????????????????????????| 3.0MB 464kB/s
Installing collected packages: Pillow
Successfully installed Pillow-8.3.1

中身確認
$ ls -l python/
total 8
drwxrwxr-x 3 ec2-user ec2-user 4096 Jul 31 08:42 PIL
drwxrwxr-x 2 ec2-user ec2-user  118 Jul 31 08:42 Pillow-8.3.1.dist-info
drwxrwxr-x 2 ec2-user ec2-user 4096 Jul 31 08:42 Pillow.libs

pip3.8 installでうまくいかない場合

Installing collected packages: Pillow
Running setup.py install for Pillow … error

このようなエラーが発生するとの報告を頂きました。
gccでビルドが必要というエラーが出るのでgccを入れてみたのですが、コンパイルエラー
結果、pip3.8ではなく、pipでインストールすると、Pillow8.4.0がインストールできました。

8.4.0の方はこの後の記載箇所、バージョン番号だけ読み替えてください。

ライブラリ一式をZIPファイルにまとめます。

$ zip -r9 Pillow-8.3.1.zip python
  adding: python/ (stored 0%)
  adding: python/Pillow.libs/ (stored 0%)
  adding: python/Pillow.libs/libopenjp2-f0612b30.so.2.4.0 (deflated 72%)
(省略)
  adding: python/Pillow-8.3.1.dist-info/WHEEL (deflated 22%)
  adding: python/Pillow-8.3.1.dist-info/INSTALLER (stored 0%)

$ ls -l
total 3264
-rw-rw-r-- 1 ec2-user ec2-user 3341755 Jul 31 08:46 Pillow-8.3.1.zip
drwxrwxr-x 5 ec2-user ec2-user      66 Jul 31 08:42 python
$

Pillow-8.3.1.zip ファイルにまとまりましたね。