人間はコードを書かずレビューもせず？AWS新ツールの作り方

米アマゾンは11月11日、クラウドサービス「AWS」の動きを手元のパソコンで再現する開発ツール「AWS Emulator」を公開しました。開発者はクラウドにつながずに自分の端末でアプリケーションを試験できます。

アマゾンはこのツールの実装を自律型のAIエージェントが書き、レビューまで担当したとしています。エンジニアのマシュー・ゴールドバーグ氏は、自身のチームはエミュレーターのコードを書いておらず、レビューもしていないと説明しました。

アマゾンによると、エージェントは3つのチームに分かれています。1つ目は再現度を測る試験の管理、2つ目はエミュレーターと実際のAWSとの違いを見つける作業、3つ目は個々の不具合の修正を担当します。変更は、コンパイル、コーディング規約、セキュリティ、デグレード（既存機能が壊れること）の各チェックを通過した後に反映されます。人間のエンジニアは、こうした安全策や、どの変更を出荷するかを決める仕組みの設計を担当しました。

AWSは実際のサービスとどれだけ一致するかを「フィデリティ」と呼んでいます。試験は、ステータスコード、作成されるリソース、副作用、エラーまですべての呼び出しが一致した場合にだけ合格となります。各試験は隔離された2つ以上のAWSアカウントで検証したとしています。

ただし、試験がない動作は未検証と明記されています。また、AWSの鍵管理サービス（KMS）のキーポリシーやストレージサービスS3のバケットポリシーは確認されないため、実際のAWSでは拒否される要求が手元では通ってしまう場合があります。

AWSはエミュレーターは開発と試験のためのものであり、本番運用やセキュリティの判断には使わないよう求めています。本番前にはアプリ全体とセキュリティ設定を実際のAWSで試験する必要があります。AIが書いたソフトウェアが広がるにつれて、誰が書いたかよりも何をどこまで検証したかが問われる場面が増えそうです。

記事ソース：資料