2024年9月7日 / 最終更新日時 : 2024年9月7日 Python【Python 3】pillowライブラリでフォルダ内の画像を一括で指定のpx幅へリサイズする Pythonによる画像リサイズ処理のスクリプト Pillow というライブラリを使用して、指定フォルダ内のすべての画像を指定した幅(縦横比を固定)にリサイズするPythonスクリプトを作成した。 環境: Python 3 […]
2022年10月7日 / 最終更新日時 : 2022年10月7日 AWS【AWS】 Lambda関数でEC2インスタンスの起動・停止を行う EC2インスタンスの起動および、停止をLambdaとEventBridgeを使用して決まった日時に行う方法をメモします。 基本的に以下AWS公式ドキュメントのQAページに記載の方法を参考にしています。 https://a […]
2022年1月3日 / 最終更新日時 : 2022年1月3日 PythonScrapyをAWS Lambdaで実行するまで ③Lambda関数の定期実行 Scrapyプログラムを定期実行する 前回までの記事 ScrapyをAWS Lambdaで実行するまで ②MySQLdb(mysqlclient)エラーの解決 ScrapyをAWS Lambdaで実行するまで ①関数作成 […]
2021年12月30日 / 最終更新日時 : 2022年1月2日 PythonScrapyをAWS Lambdaで実行するまで ⓪ネットワーク構成と各設定 Scrapy on Lambdaのネットワーク構成と設定 Scrapyプロジェクト on AWS Lambdaのネットワーク構成と必要な設定をメモ。 AWS ネットワーク構成図 Lambda関数をVPC内プライベートサブ […]
2021年12月26日 / 最終更新日時 : 2022年10月1日 PythonScrapyをAWS Lambdaで実行するまで ②MySQLdb(mysqlclient)エラーの解決 AWS LambdaでMySQLdb(mysqlclient)エラー 前回までの記事 ScrapyをAWS Lambdaで実行するまで ①関数作成とデプロイ ScrapyをAWS Lambdaで実行するまで ⓪ネットワ […]
2021年12月26日 / 最終更新日時 : 2022年10月1日 PythonScrapyをAWS Lambdaで実行するまで ①関数作成とデプロイ AWS LambdaでScrapyを実行する Scrapyで作成したクローラーをAWS Lambda上で実行できるようにするまでに行った手順をメモする。 AWS EC2インスタンス上からLambdaによるサーバーレス環境 […]
2021年12月12日 / 最終更新日時 : 2022年9月28日 DockerAmazon Linux 2 & Python3.9のDockerイメージ【DL可】 Amazon Linux 2 & Python3 Dockerイメージ AWS Amazon Linux 2の公式イメージは以下のdocker pullコマンドでdocker Hubから入手できる。 docker […]
2021年12月5日 / 最終更新日時 : 2024年9月7日 Python【Python3】requirements.txtでライブラリを一括インストールする requirements.txtによるライブラリのインポート requirements.txtを使用してpipでインストール、管理している全てのライブラリを別の環境にもまとめてインストールする方法をメモ。 環境: Pyt […]
2021年6月30日 / 最終更新日時 : 2021年12月12日 AWS【AWS】Lambdaレイヤーでライブラリを共通化 Lambdaレイヤーの作成方法 LambdaデプロイパッケージではLambda関数ごとにライブラリをzipファイルで用意する必要がありましたが、lambdaレイヤーという機能を使用することで複数の異なるLambda関数か […]
2021年6月27日 / 最終更新日時 : 2021年12月12日 AWS【AWS】Lambdaデプロイパッケージでライブラリ込みの関数を作成する Lambda関数でPythonライブラリを使用する LambdaのPython3ランタイムで実行する関数とライブラリはデプロイパッケージという仕組みで作成することができます。 関数とライブラリをzipにまとめる ソースコ […]