はじめに
株式会社NTTデータ デザイン＆テクノロジーコンサルティング事業本部の@nttd-kashiwabarayです。
re:Invent2024も2日目に突入し、本日はMatt Garman氏のキーノートセッションがありました。
キーノートセッションで発表された新サービスを中心に記載いたします。
概要・所感
本セッションでは、「Compue」、「Storage」、「Database」、「Inference(AI)」に加えて「Analytics」についての説明がなされ、数多くの新サービス、新機能が発表されました。
中でも注目したいのは新しく発表された「Amazon SageMaker Unified Studio」、「Amazon SageMaker Lakehouse」となります。
DatabricksやMicrosoft Fabricのようなコンセプトとなっており、オールインワンのデータプラットフォームとなります。
これまでは各サービスによって、UIも分かれていることで、必ずしもユーザビリティが良いというわけでもなかった中で、本サービスによってユーザビリティが大きく向上します。実際にこれまでの業務がどのように変わるのかを確認していければと思います。
また、本サービスを支えるのがDataZoneになると考えており、ガバナンス含めて構築、維持、運用も含めて、実プロジェクトで活用について見極める必要があると考えています。
発表された新サービス
◇Compute
Amazon EC2 P6 istances[アナウンス]
新しいGPUのインスタンスであるAmazon EC2 P6 instancesが発表されました。
Amazon EC2 Trn2 instances[GA]/Trn2 UltraServers[プレビュー]
AI/MLトレーニングと推論のために設計されたAmazon EC2 Trn2 instancesがリリースされました米国東部 (オハイオ)リージョンで利用が可能です。
Trn2 UltraServersは4つのTrn2インスタンスにまたがる64個のTrainium2チップを接続し、ディープラーニングと生成 AI ワークロードに対して画期的なパフォーマンスを提供します。
AWS Trainium3[アナウンス]
Trainiumの最新世代、Trainium3が発表されました。遅くとも2025年末までにリリースされる予定となっています。Trainium2と比較して、2倍のコンピューティング性能を備えており、エネルギー効率が40%向上します。
◇Storage
・Amazon S3 Tables[GA]
Apache Icebergに特化しており、最大3倍のクエリパフォーマンスと最大10倍のトランザクション処理性能が期待できます。AWSマネジメントコンソール上からもテーブル バケットを作成し、操作することも可能です。
すでにGAされておりますが、米国東部 (オハイオ、バージニア北部) および米国西部 (オレゴン)のリージョンでのみ利用可能となっており、まだ東京リージョンでは利用できません。
・Amazon S3 Metadata[プレビュー]
お客様は現在ペタバイト級のデータを保管されており、特定のオブジェクトを見つけることが困難であるという背景の基、Amazon S3 Metadataが登場しました。ニアリアルタイムで自動更新される、メタデータを使用して、特定のS3オブジェクトを即座に検出して理解するのに役立ちます。
米国東部 (オハイオ、バージニア北部) および米国西部 (オレゴン) リージョンで、プレビューでの利用が可能です。
◇Database
・Amazon Aurora DSQL[プレビュー]
クティブ/アクティブの高可用性を備えた新しいサーバーレス分散SQLデータベースであるAmazon Aurora DSQLが発表されました。Spannerと比較して、読み書きが4倍速いようです。
米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (オレゴン) リージョンで、プレビューでの利用が可能です。
・Amazon DynamoDB global tablesがマルチリージョンの強力な一貫性をサポート[プレビュー]
Amazon DynamoDB global tablesがマルチリージョンの強力な一貫性をサポートするようになりました。米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (オレゴン) リージョンで、プレビューでの利用が可能です。
◇Inference（AI）
・Amazon Bedrock Model Distillation[プレビュー]
大規模な基盤モデルから回答を生成し、生成された回答を活用して小規模な基盤モデルでファインチューニングを実施することによって、特定のユースケース向けのモデルの蒸留プロセスを自動化します。最大5倍高速で最大75%のコスト効率化を実現します。RAGなどのユースケースにおいては、精度の低下は2%未満となるようです。
現在は米国東部 (バージニア北部) および米国西部 (オレゴン) リージョンで、プレビューでの利用が可能です。
・Amazon Bedrock Automated Reasoning checks[プレビュー]
Amazon Bedrock Guardrailsの新しいセーフガード機能として、Amazon Bedrock Automated Reasoning checksが発表されました。LLMによって生成された回答の精度を数学的に検証し、ハルシネーションを防ぐのに役立てることができます。
・Amazon Bedrock multi-agent collaboration[プレビュー]
Amazon Bedrockがマルチエージェントコラボレーションをサポートしました。これにより、組織は複雑なワークフローを解決するために連携して動作する複数のAIエージェントを構築および管理できます。
米国東部 (バージニア北部)、米国西部 (オレゴン)、欧州 (アイルランド) のリージョンで、プレビューでの利用が可能です。
当社もマルチエージェントのサービスを提供しておりますので、本サービスの詳細も確認していけたらと思います。
・Amazon Nova
Amazonが開発した新しい基盤モデルである、Amazon Novaが発表されました。以下の4つのモデルが発表され、3つのモデルがすでにGAとなっています。
・Amazon Nova Micro[GA]
・Amazon Nova Lite[GA]
・Amazon Nova Pro[GA]
・Amazon Nova Premier[アナウンス]
・Amazon Nova Canvas[GA]
・Amazon Nova Reel[GA]
Amazon Nova Canvasは、スタイルとコンテンツを正確に制御し、インペインティング、アウトペインティング、背景除去などの豊富な編集機能を備えたスタジオ品質の画像を生成する最先端の画像生成モデルです。
Amazon Nova Reelは最先端のビデオ生成モデルです。
・Amazon Nova Speech-to-Speech[アナウンス]
・Amazon Nova Any-to-Any[アナウンス]
Amazon Nova Speech-to-Speechは2025年第1四半期に導入される予定です。このモデルは、自然言語でのストリーミング音声入力を理解し、言語的および非言語的な手がかり (トーンやリズムなど) を解釈し、<>低遅延で自然な人間のようなやり取りを実現することで、会話型 AI アプリケーションを変革するように設計されています。
Amazon Nova Any-to-Anyは2025年半ばに導入される予定です。このモデルにより、コンテンツをあるモダリティから別のモダリティに変換したり、コンテンツを編集したり、すべてのモダリティを理解して生成できる AI エージェントを強化したりするなど、同じモデルを使用してさまざまなタスクを実行できるアプリケーションの開発が簡素化されます。
・Amazon Q generates and applies unit tests[GA]
・Amazon Q generates accurate documentaion[GA]
・Amazon Q Performs code reviews[GA]
Amazon Q Developerは、単体テストの自動生成とテスト範囲の向上、コードベースでのドキュメントの強化、セキュリティとコード品質の問題を検出して解決するためのコードレビューのサポートの機能拡張をしました。
・GitLab Duo with Amazon Q[プレビュー]
GitLab Duo with Amazon Qは、AIエージェントを活用して、新機能の開発やJava8および11のコードベースのアップグレードなど、複雑で複数のステップから成るタスクを支援します。
・Amazon Q Developerが.NET Frameworkアプリケーションのコード変換機能をサポート[プレビュー]
・Amazon Q DeveloperがVMwareワークロードのクラウドネイティブアーキテクチャ変換をサポート[プレビュー]
・Amazon Q Developerがメインフレームアプリケーションの変換をサポート[プレビュー]
Amazon Q Developerの変換機能が発表されました。これにより、.NET、メインフレーム、VMwareの移行を加速することが可能です。
・ISVがAmazon Q indexと統合できるように機能強化[GA]
ISVがAmazon Q indexと統合し、Amazon Q組み込みのアシスタントのデザインをカスタマイズできるようになりました。
・Amazon Q DeveloperがAWS環境の運用上の問題調査に対応[プレビュー]
Amazon Q Developerで運用上の問題を調査および修復する新しい機能が発表されました。AWS社が17年以上にわたって世界中のお客様にクラウドサービスを提供してきたノウハウを基に、調査仮説を作成・提示し、トラブルシューティングと修復をガイドします。
・Combining QuickSight and Amazon Q Business data(and vice versa)
・Amazon Q Businessで複雑なワークフローを自動化[アナウンス]
Amazon Q Businessで複雑なビジネスワークフローの作成とメンテナンスを簡素化する新しい機能が追加されます。
◇Analytics
・Amazon SageMaker Unified Studio[プレビュー]
DatabricksやMicrosoft Fabricのコンセプトに近い、オールインワンのデータプラットフォームのサービスが発表されました。これまでは各サービスでユーザインターフェースが異なっていた部分もありましたが、本サービスを活用することで、一貫したユーザ体験を実現することが可能となります。AWS GlueやRedshift、Amazon SageMakerやQuickSight、Amazon Bedrockなどのサービスを単一のユーザインターフェースから活用することが可能となります。
本サービスを活用するにあたってポイントとなるのがAmazon DataZoneです。DataZoneを活用してデータカタログ、データガバナンスを実現する形となりますので、実現方法なども含めて確認を実施していけたらと思います。東京リージョンでもプレビューでの利用が可能となっています。
現在はプレビュー段階となりますが、現状GlueやRedshift、SageMakerなどを組み合わせているお客様に対しても比較的簡易に移行できる仕組みなども登場することも期待しつつ、我々のお客様の業務をどう変えていけるのかを考えていけたらと思います。
出典：https://aws.amazon.com/jp/blogs/aws/simplify-analytics-and-aiml-with-new-amazon-sagemaker-lakehouse/
Amazon SageMaker Lakehouse[GA]
Amazon SageMaker LakehouseはS3、Redshift、サードパーティおよびフェデレーションデータソース全体のデータを統合します。Apache Icebergと互換性のあるすべてのツールとエンジンを使用して、クエリを実行することが可能となります。
まとめ
本日はMatt Garman氏のキーノートセッションの中で様々な新サービスが発表されました。現在の主流であるオールインワンのデータプラットフォームである、Amazon SageMaker Unified Studioの発表、それを支えるicebetg形式でのデータ処理を実行するAmazon SageMaker Lakehouseの発表は我々にとっても大きなものになるかなと考えています。
本サービスにより、お客様の業務、そしてお客様を支える我々の業務がどう変わるのかをしっかりと理解し、訴求していけたらと考えております。
また、Amazon Bedrock Automated Reasoning checks、Amazon Bedrock multi-agent collaborationについても詳細について確認しながら、活用の検討を進めていけたらと考えています。
仲間募集
NTTデータ テクノロジーコンサルティング事業本部 では、以下の職種を募集しています。
1. クラウド技術を活用したデータ分析プラットフォームの開発・構築(ITアーキテクト/クラウドエンジニア)
クラウド／プラットフォーム技術の知見に基づき、DWH、BI、ETL領域におけるソリューション開発を推進します。
https://enterprise-aiiot.nttdata.com/recruitment/career_sp/cloud_engineer
2. データサイエンス領域（データサイエンティスト／データアナリスト）
データ活用／情報処理／AI／BI／統計学などの情報科学を活用し、よりデータサイエンスの観点から、データ分析プロジェクトのリーダーとしてお客様のDX／デジタルサクセスを推進します。
https://enterprise-aiiot.nttdata.com/recruitment/career_sp/datascientist
3.お客様のAI活用の成功を推進するAIサクセスマネージャー
DataRobotをはじめとしたAIソリューションやサービスを使って、
お客様のAIプロジェクトを成功させ、ビジネス価値を創出するための活動を実施し、
お客様内でのAI活用を拡大、NTTデータが提供するAIソリューションの利用継続を推進していただく人材を募集しています。
https://nttdata.jposting.net/u/job.phtml?job_code=804
4.DX／デジタルサクセスを推進するデータサイエンティスト《管理職/管理職候補》
データ分析プロジェクトのリーダとして、正確な課題の把握、適切な評価指標の設定、分析計画策定や適切な分析手法や技術の評価・選定といったデータ活用の具現化、高度化を行い分析結果の見える化・お客様の納得感醸成を行うことで、ビジネス成果・価値を出すアクションへとつなげることができるデータサイエンティスト人材を募集しています。ソリューション紹介
Trusted Data Foundationについて
～データ資産を分析活用するための環境をオールインワンで提供するソリューション～
https://enterprise-aiiot.nttdata.com/tdf/
最新のクラウド技術を採用して弊社が独自に設計したリファレンスアーキテクチャ（Datalake+DWH+AI/BI）を顧客要件に合わせてカスタマイズして提供します。
可視化、機械学習、DeepLearningなどデータ資産を分析活用するための環境がオールインワンで用意されており、これまでとは別次元の量と質のデータを用いてアジリティ高くDX推進を実現できます。
TDF-AM（Trusted Data FoundationⓇ - Analytics Managed Service）について
～データ活用基盤の段階的な拡張支援（Quick Start) と保守運用のマネジメント（Analytics Managed）をご提供することでお客様のDXを成功に導く、データ活用プラットフォームサービス～
https://enterprise-aiiot.nttdata.com/service/tdf/tdf_am
TDFⓇ-AMは、データ活用をQuickに始めることができ、データ活用の成熟度に応じて段階的に環境を拡張します。プラットフォームの保守運用はNTTデータが一括で実施し、お客様は成果創出に専念することが可能です。また、日々最新のテクノロジーをキャッチアップし、常に活用しやすい環境を提供します。なお、ご要望に応じて上流のコンサルティングフェーズからAI/BIなどのデータ活用支援に至るまで、End to Endで課題解決に向けて伴走することも可能です。
NTTデータとTableauについて
ビジュアル分析プラットフォームのTableauと2014年にパートナー契約を締結し、自社の経営ダッシュボード基盤への採用や独自のコンピテンシーセンターの設置などの取り組みを進めてきました。さらに2019年度にはSalesforceとワンストップでのサービスを提供開始するなど、積極的にビジネスを展開しています。
これまでPartner of the Year, Japanを4年連続で受賞しており、2021年にはアジア太平洋地域で最もビジネスに貢献したパートナーとして表彰されました。
また、2020年度からは、Tableauを活用したデータ活用促進のコンサルティングや導入サービスの他、AI活用やデータマネジメント整備など、お客さまの企業全体のデータ活用民主化を成功させるためのノウハウ・方法論を体系化した「デジタルサクセス」プログラムを提供開始しています。
https://enterprise-aiiot.nttdata.com/service/tableau
NTTデータとAlteryxについて
Alteryx導入の豊富な実績を持つNTTデータは、最高位にあたるAlteryx Premiumパートナーとしてお客さまをご支援します。
導入時のプロフェッショナル支援など独自メニューを整備し、特定の業種によらない多くのお客さまに、Alteryxを活用したサービスの強化・拡充を提供します。
NTTデータとDataRobotについて
NTTデータはDataRobot社と戦略的資本業務提携を行い、経験豊富なデータサイエンティストがAI・データ活用を起点にお客様のビジネスにおける価値創出をご支援します。
NTTデータとInformaticaについて
データ連携や処理方式を専門領域として10年以上取り組んできたプロ集団であるNTTデータは、データマネジメント領域でグローバルでの高い評価を得ているInformatica社とパートナーシップを結び、サービス強化を推進しています。
https://enterprise-aiiot.nttdata.com/service/informatica
NTTデータとSnowflakeについて
NTTデータではこれまでも、独自ノウハウに基づき、ビッグデータ・AIなど領域に係る市場競争力のあるさまざまなソリューションパートナーとともにエコシステムを形成し、お客さまのビジネス変革を導いてきました。
Snowflakeは、これら先端テクノロジーとのエコシステムの形成に強みがあり、NTTデータはこれらを組み合わせることでお客さまに最適なインテグレーションをご提供いたします。