AWSAWS Lambda PythonでSeleniumとheadless-chromiumを使ってスクレイピングする方法
Seleniumを使ってスクレイピングをするスクリプトをAWS lambda上で動作させる際にハマったのでメモします。 ちなみにLambdaのPythonバージョンが3.9だと以下の方法を実施...
AWS
AWS
AWSAWS CLIでCloudWatch Logsのログをリアルタイムで確認する
AWSでLambdaなどの開発を行っていると、Cloudwatch logsのログを確認したいと思う場合が多々あります。 aws logs tail --follow を使うことでいい感じ...
AWSAWS CDKを使ってEC2の起動と停止を自動化してみた(python)
LambdaとEventBridgeでEC2電源操作(起動と停止)を自動化し、それをAWS CDKでPythonでコード化してみました。 Lambdaで特定のタグを持つ EC2 インスタンスの...
AWSAWS LambdaのDeployをAWS CLI経由で行う方法
AWS CDKでLambda関数をPythonを作成したのですが、CDKではインフラ構成変更は更新されますが、関数自体は更新してくれないようです。。。確かにCDKでは関数の内容までは検知しませんよね...
AWSAWS CDKをバージョンアップしてみる(windows)
aws cdkを利用していて、初回のcdk boorstrapしようとしたら以下のエラーがでてバージョンアップしろと怒られました。なのでバージョンアップしてみます。 ちなみにwindowsにイ...
AWSWindowsのAWS CLIにprofileを追加する
複数リージョンで使いたかったのでprofileを複数持ちたい場合の対応です。メモです。 こちらのAWSに書いてある方法です。 credentialファイル 場所：%USERPROF...
AWSPyCharmにCloudFormation構文チェックのためcfn-lintプラグインを導入(Windows)
cfn-lintを使うことでCloudFormationのテンプレートの構文チェックを行う事ができます。 これまでプロジェクトには基本的にCIの中で自動実行していました。 ただ、それだと...
AWSCloudFormationとAnsibleでEC2インスタンス構築時にOpenVPN構築してみた
以前に紹介した以下の記事で、AWS上のAmazonLinux2にOpenVPNサーバを構築しました。 AWS上のEC2でOpenVPNサーバを構築する さらに以下の記事ではAnsible...
AWSopenvpn構築の際のエラーログ対応
以前にOpenVPNサーバをAWSのEC2上に構築したのですが、その際に少しはまったエラーについて自分用のメモです。 AWS上のEC2でOpenVPNサーバを構築する 1. WARNI...
AWSAmazonLinux2へrootでログオンできるように設定を変更する
EC2インスタンスで構築したAmazonLinux2へはデフォフォルトではrootでログオンできません。 一旦 ec2-userでログインしてから毎回 sudo su - でrootに変更する...
AWSCloudFormationでec2のcfn-initを使ったデバック方法
CloudFormationでEC2インスタンスへパッケージを自動インストールセットする際には、UserDataを利用する必要があります。 UserDataを利用した方法については以下でメモし...
AWSAWS EC2からCodeCommitのリポジトリをCloneする
EC2インスタンスからCodeCommitのリポジトリをCloneする方法のメモです。 通常のCodeCommitのアクセスにはIAMユーザで認証情報を入力する必要があります。 ただし...
AWSAWS CloudFormationでEC2にUserdataでパッケージをインストールする
以前にCloudFormationでEC2インスタンスを作成する方法について紹介いたしました。 AWSのCloudFormationでIaCを実践(4) – ec2 これだけでは素のA...
AWSvenv環境でamazon-linux-extras install -y epelが失敗した場合の対応
venv環境でmazon-linux-extrasを利用しようとしたら以下のエラーが発生しました。その対応方法について自分用のメモとなります。 (venv) [root@ip-10-1...
AWSAWSのCloudFormationでIaCを実践(8) – Route53 Resolver
前回はRoute53 PrivateHostedZoneを作成してレコードを登録しました。 前回(第7回) - Route53 HostedZone最終的にVPC内のインスタンスであれば名前解...