クラウドサービスAWSで最大の年次カンファレンス「AWS re:Invent」が2023年も開幕しました🎉
私は昨年までオンライン配信で楽しんでいましたが、今年は初めて現地ラスベガスに訪問できましたので、会場でしか聞けないナマ情報も含めてお届けします！
発表直後のサービスや、現地で口頭でのみ聞き取った情報なども多いため誤りを含む可能性があります。あらかじめご了承くださいますと幸いです。
初日分はこちらをどうぞ。
２日目のキーノートはCEOからの目玉発表！
火曜朝は例年、AWSのCEO アダムさんから最も目玉となる新機能などがお披露目されます。
すでにYouTubeでアーカイブ動画も公開されています。
大きめの発表は以下でした
- Amazon S3 Express One Zone
- AWS Graviton 4（R8g Instances for EC2）
- AWS Trainium 2
Amazon Bedrock関連
- Amazon Bedrock ファインチューニング対応モデルの拡大
- Continued Pre-training for Amazon Titan
- Agents for Amazon Bedrock
- Knowledge Bases for Amazon Bedrock
- Guardrails for Amazon Bedrock
Amazon Q
Analytics関連
- Zero-ETL integrations with Amazon Redshift
- Amazon DataZone AI recommendations
※漏れがあったらご容赦ください🙏
私が気になったアプデを中心にクローズアップ！
Amazon S3 Express One Zone
シングルAZとなる代わりに、StandardクラスのS3バケットの10倍の性能を発揮できるパフォーマンス特化クラスです。
AWS Graviton 4（R8g Instances for EC2）
かつてはモバイル系で主に使われていたARM系のCPUをベースとして、近年多くの会社が自社チップを開発していますが、Amazonも例に漏れずGravitonシリーズのシリコンを開発しAWSリソースで利用可能にしています。その最新版となるGraviton 4が発表されました。前世代のGraviton 3より30%〜45%高速化しているようです。
第一弾のローンチ先として、EC2のR8gインスタンスが同時にプレビュー開始です。
AWS Trainium 2
NVIDIA社との連携強化の話のあとに紹介されました。機械学習のトレーニングに特化したTraniumチップの第2世代で、4倍速くなったそうです。具体的なインスタンスへの実装はまだアナウンスされていません。
Amazon Bedrock ファインチューニング対応モデルの拡大
ここからはBedrock祭りです。まずはファインチューニング（追加学習による微調整）に対応する基盤モデルが増えました。従来のAmazon Titanに加えてMeta Llama 2、Cohere Commandが追加。またClaudeも近日対応するようです。
Continued Pre-training for Amazon Titan
こちらはモデルの「継続的な事前学習」にAmazon Titanが対応したというアップデートです。リージョン限定で公開プレビューの段階となります。
分かりにくい概念のため私もドキュメントを読んだのですが、ラベルされていないドメイン固有データを活用して学習させることは分かったものの、「継続的な」「事前」がそれぞれ何を指すのかが正直ピンと来ていません。
ざっくり「汎用データで学習済みの既成モデルを引き続きトレーニングすること」ぐらいにとらえています。「事前」は最後の微調整（ファインチューニング）よりも前、ぐらいのニュアンスでしょうか。詳しい方いたら教えてください🙏
Agents for Amazon Bedrock
今回もっとも事前に予想しやすかった発表の一つですね。Bedrockの目玉機能「Agents」が限定プレビュー期間を経てようやくGAになりました。
Bedrockの基盤モデルに対して、「組み込むアプリケーションの用途に合うように事前指示をインプットしておく」「自社固有のデータを参照させる（RAG）」などを実現するにはこれまで、Bedrockを呼び出す側のアプリケーションで実装を頑張る必要がありました。
これをAWSのマネコンからGUIでポチポチやるだけで「どんな事前指示を出したいか」を設定したり「S3バケットにアップした自社文書を検索先として指定する」などがローコードで実装できてしまいます。
「ReAct」というプロンプトエンジニアリングの手法に基づいて、Agents for Bedrockが自ら「与えられた目的を達成するにはどういう計画で行動すればよいか」を考えて実行してくれます。作成したエージェントはデプロイして自分のアプリケーションに組み込むことができます。
Knowledge Bases for Amazon Bedrock
前述のAgents for Bedrockで検索する「自社固有のデータソース」として使われるのがこのKnowledge Beseです。
実は9月の段階でAgents for Bedrockと一緒に限定プレビューのアナウンスがされていたのですが、そもそもBedrock自体がGA前だったこともあり、Agentsの限定プレビューも全然降りてこないため私は存在を認識できていませんでした（笑）
データソースとしてS3バケットを指定し、そこにある文書を数値化（ベクトル変換）して保存するための格納先を選択します。OpenSearch Serverlessのほか、外部SaaSであるPineconeやRedis Enterprise Cloudにも対応しているようです。
Guardrails for Amazon Bedrock
こちらは完全にお初の機能で、まだ限定プレビューのようです。
Bedrockの基盤モデルは元々、好ましくない表現を出力しないようにModerationが施されていますが、ユーザー固有の要件を加味して「NGワード」的なものを事前に設定して制限したりできるのがGuardrails機能のようです。すべてのBedrock基盤モデルとファインチューンしたカスタムモデル、およびAgentsにも対応。
Amazon Q
今回のre:Inventの一番の目玉。一言でいうと「AWS版のCopilotシリーズ（※）」ですね。
※ECS用のデプロイツールである「AWS Copilot」は今回関係ありません。
Amazon Qは色んなところに現れて、普通のビジネスマンからエンジニアまで様々な人の仕事を生成AIの力でサポートしてくれます。MS社の「Copilotシリーズ」同様、Amazon Qは一種のブランドであり具体的な実装やインターフェースはユースケースによりかなり異なっています。
Amazon Q （ビジネス向け）
AWSマネコンからのGUI操作だけでRAGチャットボットを簡単に作成することができます。
データソースにはS3やWebクローラーのほか、GoogleドライブやTeamsといった外部のSaaS製品を検索できるコネクターが多数用意されています。
こう聞くと前述のAgents for Bedrockと似ている気がしますが、現地で質問したところ「両者の位置するレイヤーが異なる」ということでした。
Amazon Qは一番レイヤーの高いアプリケーション層を提供するサービスで、汎用的なアプリケーションを素早く市場提供することを重要視しており、一方でBedrock周辺機能は自分のアプリケーションへの組み込みやモデルのカスタマイズなど、より細かい要件に対応できるソリューションとなっています。
Amazon Q （開発者向け）
- Amazon Q in the console：マネコンの右端に現れて技術QAに答えてくれる
- Amazon Q in the IDE：GitHubでいうCopilot Chatのようなもの
- Amazon Q feature development：例えばJavaバージョンアップ時のコード自動変換など
- Amazon Q generates tests：テストコードを書いてくれる？
- Amazon Q troubleshoots：マネコン上でトラブルシュートをQAで助けてくれる
すでにQuickSight Qというサービスもありましたが、あのような感じで様々なAWSサービスに各コンソール専用のQが登場してくるようです。
Zero-ETL integrations with Amazon Redshift
マネージドなデータウェアハウス用RDB、Redshiftへのデータ変換を自動でやってくれるZero-ETL機能が従来のAurora MySQLに加えてAurora PostgreSQL、RDS for MySQL、DynamoDBの3種類に追加対応します。（まだプレビューです）
Amazon DataZone AI recommendations
組織のデータ制御をマネージドに提供してくれるDataZoneに、AIがデータの説明や「どんな分析に使えそうか」といったアドバイスを生成してくれるそうです。（これもプレビューです）
Project Kuiper
Amazon版のStarlink的なプロジェクトを始めたようです。AWS専用の衛星通信によって、どんな場所でもAWSリソースへプライベートな通信が確立できるようになるとのこと。
次回は3日目編！
機械学習系のVP、スワミさんのキーノートを特集します。生成AIや分析関連のさらなるアップデートがあります！
ちなみに来週12/6(水)のお昼に、ラスベガスで共に学んだ仲間とアップデートをおさらいするオンライン勉強会を企画していますので、ご興味あれば是非ご参加ください👍