はじめに
株式会社NTTデータ テクノロジーコンサルティング事業本部の@nttd-kashiwabarayです。
re:Invent2024も3日目に突入し、本日はDr.Swami氏のキーノートセッションがありました。
キーノートセッションで発表された新サービスを中心に記載いたします。
本日のキーノートセッションはステージ中央の一番前の席から参加させていただきました。
概要・所感
本日のキーノートセッションでは、Amazon SageMakerやAmazon Bedrockを中心にAI/MLの新サービス・機能アップデートが多く発表されました。
個人的に気になったのは、コストの削減につながる発表が多かったことです。Amazon Bedrockがプロンプトキャッシュをサポートしたことや、Amazon Bedrock Prompt Routingの発表など、プロンプトで頻繁に仕様されるコンテキストをキャッシュしたり、プロンプトの複雑さに応じて活用するモデルを変えたり、コストの削減につながるもののリリースが多かった印象を受けています。これはモデルの価格が高いということを示しているのかなと考えております。
また、AIエージェントで活用を見据えると、RAGと比較してトークンも10-20倍に増えていくこともあるので、本格的な業務活用を見据えるとこのような機能は必須になってくると考えられます。
また、Amazon Bedrock MarketplaceはBedrockの単一のAPIを介してアクセスできること、またAWS基盤内で完結するためセキュリティも確保されていることも特長で、100を超える基盤モデルにアクセスできることは、今後強みになってくると思います。また、現状はAmazon Bedrockでのクォータは本格的に活用していく上ではやや足りないものもあるのかなと思っていましたが、本サービスはインスタンス数やインスタンスタイプも指定して立ち上げることから、そのあたりも緩和されるのではないかと考えており、しっかりと理解を進めていけたらと思います。
発表された新サービス
・Amazon SageMaker HyperPod flexible training plans[GA]
https://aws.amazon.com/jp/about-aws/whats-new/2024/12/amazon-sagemaker-hyperpod-flexible-training-plans/
Amazon SageMaker HyperPodはスケジュールと予算内で生成AIモデルをトレーニングできる新しい機能である柔軟なトレーニングプランを発表しました。以下の画像のように、インスタンスタイプ、インスタンス数、開始日/終了日、期間を入力することによって、トレーニングプランの提案を価格とともにしてくれます。
米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (オレゴン) のリージョンで利用可能です。一部のインスタンスタイプについては、米国東部 (オハイオ)リージョンのみで利用可能です。
・Amazon SageMaker HyperPod task governance[GA]
トレーニングや推論などのすべての生成AI開発タスクにわたる一元的なガバナンスを提供するようになりました。コンピューティングリソースの割り当てを完全に可視化して制御できるため、最も重要なタスクが優先され、コンピューティングリソースの使用率が最大化され、モデル開発コストが最大40%削減されます。
米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (オレゴン) リージョンで利用可能です。
・AWSパートナーのAIアプリケーションがSageMakerで利用可能に[GA]
AWS パートナーのAIアプリケーションがSageMakerで利用可能になりました。Amazon SageMaker AIを離れることなく、主要なアプリプロバイダーが提供する機械学習および生成AI開発アプリケーションをプライベートで簡単に利用できるようにする新機能で、高性能な AI モデルをより迅速に開発することができます。
・poolside Assistant[アナウンス]
資金調達ラウンドで30億ドルの評価額を獲得した最先端のAIユニコーンである poolsideは本日、poolside の生成AIアシスタントと基盤モデルをAmazon Bedrockで利用できるようにする複数年契約を発表しました。
・Amazon Bedrock Marketplace[GA]
Amazon Bedrockを通じて100を超える基盤モデルにアクセスできる機能が発表されました。
Amazon Bedrock Marketplaceでデプロイされたモデルは、通常のAmazon Bedrockと同様の標準APIを介してアクセスでき、Amazon Bedrock Agents、Amazon Bedrock Knowledge Bases、Amazon Bedrock Prompt Management、 Amazon Bedrock Guardrails、 Amazon Bedrock model evaluationといったサービスからもモデルを利用することができます。
SageMakerのエンドポイントを指定し、インスタンス数やインスタンスタイプも指定して、デプロイを実施する形となります。重要な点としてはAWS内のリソースで完結し、インターネットを介すことなく、セキュリティを確保することが出来ます。
私の理解が間違っていなければ、インスタンス数やインスタイプも指定することから、もちろんリソースの中でという制約はあるものの、これまでAmazon Bedrockの各サービスで制限されていたクォータについても、緩和されるのかなと考えています。特に上限緩和の出来ないクォータなどもあったので、その辺りがどうなるのかといった点も今後確認していけたらと思います。
なお、Amazon Bedrock Marketplaceは東京リージョンでも利用可能となっているので、ぜひお試しください。
・Amazon Bedrockがプロンプトキャッシュをサポート[プレビュー]
複数のモデル呼び出しにわたってプロンプトで頻繁に使用されるコンテキストをキャッシュできるようになりました。ユーザーが同じドキュメントについて複数の質問をするQ&Aシステムや、同じコンテキストを繰り返し使用するアプリケーションなどに特に役立ちます。キャッシュされたコンテキストは、各アクセス後最大5分間利用できます。Amazon Bedrockのプロンプトキャッシュにより、サポートされているモデルではコストを最大90%、レイテンシーを最大85%削減することができます。
米国西部 (オレゴン) リージョンでAnthropicのClaude 3.5 Sonnet V2およびClaude 3.5 Haikuのプレビューでの利用が可能です。米国東部 (バージニア北部)リージョンでもAmazon Nova Micro、Amazon Nova Lite、Amazon Nova Proでプレビューでの利用が可能です。
本機能はユースケースによっての使いわけになるのかなと考えておりますが、次のAmazon Bedrock Prompt Routingなども含めてモデルのコストを意識したアップデートがされているなという印象を受けています。
・Amazon Bedrock Prompt Routing[プレビュー]
モデルを呼び出すときに、同じモデルファミリーの基盤モデルを組み合わせて使用して、品質とコストを最適化できるようになりました。例えば、AnthropicのClaudeモデルファミリーを使用すると、Amazon Bedrockはプロンプトの複雑さに応じて、Claude 3.5 SonnetとClaude 3 Haikuの間でリクエストをインテリジェントにルーティングできます。
米国東部 (バージニア北部) および米国西部 (オレゴン) リージョンで、プレビューでの利用が可能です。
特にAIエージェントなどにおいては、通常のRAGなどに比べてトークンが10-20倍程度になってくるので、プロンプトの複雑さによって、品質とコストを最適にできる本サービスはかなり有効になるのではと考えております。
・Amazon Kendra Generative AI Index[プレビュー]
Amazon KendraのGenAI Indexが発表されました。RAGとインテリジェント検索向けに設計されたAmazon Kendraの新しいインデックスで、高度なセマンティックモデルと最新の情報検索テクノロジーを使用して、高い検索精度を提供します。Amazon Bedrock Knowledge BaseやAmazon Q BusinessなどのAWS生成AIサービス全体でサポートされております。
東京リージョンでも、プレビューでの利用が可能です。
・Amazon Bedrock Knowledge Basesが構造化データ取得をサポート[プレビュー]
Amazon Bedrock Knowledge Basesが、データソースから構造化データを取得するための自然言語クエリをサポートするようになりました。これらの新機能により、構造化データソースと非構造化データソースから情報を処理できる包括的なAIアプリケーションの構築が容易になります。
現時点では、Bedrock Knowledge Base は Amazon Redshift および Amazon Sagemaker Lakehouse からの構造化データ取得をサポートしており、東京リージョンでも、プレビューでの利用が可能です。
・Amazon Bedrock Knowledge BasesがGraphRAGをサポート[プレビュー]
Amazon Bedrock Knowledge BasesがGraphRAGをサポートしました。これにより、より精緻で文脈に即した応答を生成することが可能となります。東京リージョンでもプレビューにて利用することが可能です。
・Amazon Bedrock Data Automation[プレビュー]
ドキュメント、画像、音声、動画などの非構造化マルチモーダルコンテンツから価値ある洞察を効率よく生成する、Amazon Bedrockのフルマネージド機能を発表しました。開発者が単一のインターフェイスを通じてマルチモーダルコンテンツを処理するために使用できる、統合されたAPI駆動型のエクスペリエンスを提供します。
米国西部 (オレゴン) リージョンで、プレビューでの利用が可能です。
・SageMaker CanvasでAmazon Q Developerが利用可能に[プレビュー]
Amazon Q Developer がAmazon SageMaker Canvasで利用可能になりました。MLの経験がないユーザーが、ガイド付きのMLワークフローを通じてビジネス上の問題に対するソリューションを作成できるようになります。データ分析やモデルの選択から展開まで、ユーザーは自然言語を使用してビジネス上の問題を解決できるようになります。
・Amazon Q in QuickSight Scenarios
QuickSightのAmazon Qの新しいシナリオ分析機能が発表されました。自然言語プロンプトを使用して、詳細なデータ分析 (分析アプローチの提案、データの自動分析、推奨アクションによる調査結果の要約) を段階的にガイドすることで、ビジネスユーザーが複雑な問題に対する答えを見つけるのに役立ちます。
米国東部 (バージニア北部) および米国西部 (オレゴン)リージョンで、プレビューでの利用が可能です。
・AWS Education Equity Initiative[GA]
世界中で十分な教育を受けられていない学習者向けに支援するサービスが発表されました。今後5年間で最大1億ドルをクラウドテクノロジーと包括的な技術アドバイスに投じる予定となっています。
まとめ
本日のキーノートセッションでも様々な新しい機能が発表されました。現状の業務にどう取り入れていくか、お客様にどのような価値提供ができるのかをしっかりと考えながら進めていければと考えております。
仲間募集
NTTデータ テクノロジーコンサルティング事業本部 では、以下の職種を募集しています。
1. クラウド技術を活用したデータ分析プラットフォームの開発・構築(ITアーキテクト/クラウドエンジニア)
クラウド／プラットフォーム技術の知見に基づき、DWH、BI、ETL領域におけるソリューション開発を推進します。
https://enterprise-aiiot.nttdata.com/recruitment/career_sp/cloud_engineer
2. データサイエンス領域（データサイエンティスト／データアナリスト）
データ活用／情報処理／AI／BI／統計学などの情報科学を活用し、よりデータサイエンスの観点から、データ分析プロジェクトのリーダーとしてお客様のDX／デジタルサクセスを推進します。
https://enterprise-aiiot.nttdata.com/recruitment/career_sp/datascientist
3.お客様のAI活用の成功を推進するAIサクセスマネージャー
DataRobotをはじめとしたAIソリューションやサービスを使って、
お客様のAIプロジェクトを成功させ、ビジネス価値を創出するための活動を実施し、
お客様内でのAI活用を拡大、NTTデータが提供するAIソリューションの利用継続を推進していただく人材を募集しています。
https://nttdata.jposting.net/u/job.phtml?job_code=804
4.DX／デジタルサクセスを推進するデータサイエンティスト《管理職/管理職候補》
データ分析プロジェクトのリーダとして、正確な課題の把握、適切な評価指標の設定、分析計画策定や適切な分析手法や技術の評価・選定といったデータ活用の具現化、高度化を行い分析結果の見える化・お客様の納得感醸成を行うことで、ビジネス成果・価値を出すアクションへとつなげることができるデータサイエンティスト人材を募集しています。ソリューション紹介
Trusted Data Foundationについて
～データ資産を分析活用するための環境をオールインワンで提供するソリューション～
https://enterprise-aiiot.nttdata.com/tdf/
最新のクラウド技術を採用して弊社が独自に設計したリファレンスアーキテクチャ（Datalake+DWH+AI/BI）を顧客要件に合わせてカスタマイズして提供します。
可視化、機械学習、DeepLearningなどデータ資産を分析活用するための環境がオールインワンで用意されており、これまでとは別次元の量と質のデータを用いてアジリティ高くDX推進を実現できます。
TDF-AM（Trusted Data FoundationⓇ - Analytics Managed Service）について
～データ活用基盤の段階的な拡張支援（Quick Start) と保守運用のマネジメント（Analytics Managed）をご提供することでお客様のDXを成功に導く、データ活用プラットフォームサービス～
https://enterprise-aiiot.nttdata.com/service/tdf/tdf_am
TDFⓇ-AMは、データ活用をQuickに始めることができ、データ活用の成熟度に応じて段階的に環境を拡張します。プラットフォームの保守運用はNTTデータが一括で実施し、お客様は成果創出に専念することが可能です。また、日々最新のテクノロジーをキャッチアップし、常に活用しやすい環境を提供します。なお、ご要望に応じて上流のコンサルティングフェーズからAI/BIなどのデータ活用支援に至るまで、End to Endで課題解決に向けて伴走することも可能です。
NTTデータとTableauについて
ビジュアル分析プラットフォームのTableauと2014年にパートナー契約を締結し、自社の経営ダッシュボード基盤への採用や独自のコンピテンシーセンターの設置などの取り組みを進めてきました。さらに2019年度にはSalesforceとワンストップでのサービスを提供開始するなど、積極的にビジネスを展開しています。
これまでPartner of the Year, Japanを4年連続で受賞しており、2021年にはアジア太平洋地域で最もビジネスに貢献したパートナーとして表彰されました。
また、2020年度からは、Tableauを活用したデータ活用促進のコンサルティングや導入サービスの他、AI活用やデータマネジメント整備など、お客さまの企業全体のデータ活用民主化を成功させるためのノウハウ・方法論を体系化した「デジタルサクセス」プログラムを提供開始しています。
https://enterprise-aiiot.nttdata.com/service/tableau
NTTデータとAlteryxについて
Alteryx導入の豊富な実績を持つNTTデータは、最高位にあたるAlteryx Premiumパートナーとしてお客さまをご支援します。
導入時のプロフェッショナル支援など独自メニューを整備し、特定の業種によらない多くのお客さまに、Alteryxを活用したサービスの強化・拡充を提供します。
NTTデータとDataRobotについて
NTTデータはDataRobot社と戦略的資本業務提携を行い、経験豊富なデータサイエンティストがAI・データ活用を起点にお客様のビジネスにおける価値創出をご支援します。
NTTデータとInformaticaについて
データ連携や処理方式を専門領域として10年以上取り組んできたプロ集団であるNTTデータは、データマネジメント領域でグローバルでの高い評価を得ているInformatica社とパートナーシップを結び、サービス強化を推進しています。
https://enterprise-aiiot.nttdata.com/service/informatica
NTTデータとSnowflakeについて
NTTデータではこれまでも、独自ノウハウに基づき、ビッグデータ・AIなど領域に係る市場競争力のあるさまざまなソリューションパートナーとともにエコシステムを形成し、お客さまのビジネス変革を導いてきました。
Snowflakeは、これら先端テクノロジーとのエコシステムの形成に強みがあり、NTTデータはこれらを組み合わせることでお客さまに最適なインテグレーションをご提供いたします。