37
29

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 1 year has passed since last update.

NRI OpenStandia Advent Calendar 2022

Day 20

AWSで利用されているオープンソース

Last updated at Posted at 2022-12-20

はじめに

AWSについて学んでいると、オープンソースソフトウェア(OSS)を活用することにより、実現されているサービスが数多く存在していることに気づきます。
実績・経験があるOSSをクラウド上で利用をしたいというユーザーは多く、AWSはそのニーズに応じてサービス提供を行っているためです。

一方で、前提となるOSSに関する知識が少ない場合、AWSサービスについて理解が難しかったり、似たようなサービスのうちどれを選択すれば良いか判断がつかなかったりします。AWSを知るためには、OSSについても知る必要があります。

そこで、今回はタイトルの通り、AWSで利用されているOSSをまとめましたので共有します。
言葉は聞いたことはあるけど、何の事かよく知らないという方が詳しく知るきっかけになればと思います。

前提事項

  • 今回はなるべく網羅的に、AWS関連のOSSを列挙することを目的にしました。各々の詳細な説明はリンク先にお任せすることにし、本文では基本的な特徴を記載します。
  • AWSの場合、OSSそのものをマネージドで提供しているサービスと、OSS互換の機能を持つが中身はOSSとは異なるサービスがありますが、本文では特に区別しておりません。後者の場合は、AWSの公式ページで「互換」という言葉で表現されているようです。
  • リンク先は原則AWSの公式サイト、もしくは、NRI OpenStandiaの公式サイトとしています。(2022/12/20時点のものなります。)

データベース

AWSサービス名 説明 関連OSS
Amazon Aurora リレーショナルDB PostgreSQLMySQL
Amazon RDS リレーショナルDB PostgreSQL、MySQL、MariaDB
Amazon Redshift データウェアハウス PostgreSQL
Amazon DocumentDB ドキュメントDB MongoDB
Amazon ElastiCache インメモリデータストア RedisMemcached
Amazon MemoryDB for Redis インメモリデータストア Redis
Amazon Keyspaces NoSQL分散データベース Cassandra
  • AuroraとRDSはどちらもリレーショナルDBですが、基本的にはAuroraの方が性能や可用性等の様々な面で優れており推奨されます。ただし、利用できるDBエンジンの選択肢はRDSの方が多く、Auroraを利用する場合は、選択肢はPostgreSQLとMySQLに限られます。PostgreSQLは商用DBと比較しても遜色ない豊富な機能や信頼性を持っていること、MySQLはOSSのDBとしては最も普及しているため情報を集めやすいこと、などが特徴として挙げられます。
  • Amazon Redshiftは、PostgreSQLをベースとしていますが、サポートしている機能や関数に相違があるため注意が必要です。(Amazon Redshift および PostgreSQL)
  • MariaDBは、オラクル社がMySQLを買収したことをきっかけに派生したOSSで、MySQLと基本的には互換性を持っています。後発ながら開発コミュニティが活発で、性能などの機能強化が行われています。
  • MongoDBは、JSONドキュメント形式のデータを保存する際に有用なDBで、リレーショナルDBのようにテーブル定義をする必要がありません。
  • RedisとMemcachedは、ともにインメモリデータストアで、高いパフォーマンスが求められるシステムのキャッシュ用途に使用されます。Memcachedは、機能がシンプルで扱いやすい一方で、Redisは高機能で多くのユースケースに対応可能です。(Redis と Memcached の比較
  • Amazon ElastiCacheとAmazon MemoryDB for Redisは類似のサービスですが、ElastiCacheの弱点であるデータ耐久性を強化したのがMemoryDBです。(ただし、書き込み性能は低下します。)
  • Cassandraは、パーティションキーに基づいてデータを分散配置するNoSQLデータストアで、Amazon KeyspacesとしてCassandraをサーバーレスで利用できます。AWSには類似の主要サービスであるDynamoDBがあるため出番が少ないかもしれませんが、既にオンプレミスでCassandraを利用していて、AWSへの移行が必要な場合などはAmazon Keyspacesの方が移行が容易となります。

データ分析

AWSサービス名 説明 関連OSS
Amazon EMR ビッグデータ処理 HadoopSparkPresto
Amazon Athena クエリサービス Presto
Amazon Managed Streaming for Apache Kafka (MSK) ストーリーミング送受信処理 Apache Kafka
Amazon OpenSearch Service 検索サービス OpenSearch
  • ビッグデータ処理は多数のリソースが必要となるため、スケーリングが容易なクラウドとの相性がよく、AWSではEMRとしてサービス提供されています。EMRは、HadoopやSparkといった分散処理フレームワークが利用されています。
  • HadoopとSparkは類似のOSSですが、後発のSparkはデータをインメモリにキャッシュすることで、Hadoopよりも高速の処理が可能となっています。しかし、データサイズがメモリに乗り切らない処理は、依然としてHadoopが有用であり、両者は組み合わせて利用されます。
  • Hadoopとセットで利用されるOSSとしてApache HBaseApache HiveHueなどがあります。それぞれ、ビッグデータ処理に適したDB、データウェアハウス、GUIとなります。(余談ですがこの辺り、OSSが多用されているため、整理したくなり、この記事のテーマを思い至りました。)
  • Prestoは、高性能分散型クエリエンジンで大量データに対するクエリを行う際に有用です。EMRに組み込まれている他、クエリサービスであるAthenaとしてインタラクティブかつ手軽に利用できます。
  • データ分析の最初のステップに大量データ取込みがあります。Kafkaは、リアルタイムでストリーミングデータの取込みを行うことができるOSSです。AWSには、類似サービスとして、Amazon Kinesis Data Streamsが存在しています。他のAWSサービスとの親和性や導入のし易さは、Kinesis Data Streamsが優位ですが、処理可能なメッセージのサイズや保持期間においてはKafkaが優位であるなど様々な相違点があります。既にオンプレミスでKafkaを利用されている場合はAWSへの移行が容易です。
  • Amazon OpenSearch Serviceは、大量データを扱うことができる検索・分析のサービスです。従来、Amazon Elasticsearchとして存在していましたが、Elasticsearchのライセンス体系変更に伴い、名称が変更となりました(Elasticsearchのライセンス変更にともなう AWS の対応方針)。OpenSearchは、ライセンス体系変更前のElasticsearchを元に派生した、AWS提供のOSSとなります。

構成管理

AWSサービス名 説明 関連OSS
AWS OpsWorks 構成管理サービス ChefPuppet
  • Chef、Puppetは、コードを使用してサーバーの構成を管理・自動化できるようにするためのOSSです。これにより、複数台のサーバに同じ設定作業を行うことによる労力や人的ミスを減らすことが可能です。
  • OpsWorksには、AWS OpsWorks for Chef AutomateAWS OpsWorks for Puppet EnterpriseAWS OpsWorks スタックの3つの選択肢がありますが、Chef、Puppetの経験がなければ、AWS OpsWorks スタックを選択します。AWS OpsWorks スタックは、Chef レシピ(Chefにおける構成管理の記述方法)がサポートされています。

OpenJDK

AWSサービス名 説明 関連OSS
Amazon Corretto OpenJDKディストリビューション Java

コンテナ

AWSサービス名 説明 関連OSS
Amazon Elastic Container Service (ECS) コンテナ Docker
Amazon Elastic Kubernetes Service (EKS) コンテナオーケストレーション Kubernetes
Red Hat OpenShift Service on AWS (ROSA) コンテナオーケストレーション OpenShift
  • AWSには様々なコンテナ関連のサービスが存在していますが、どれもDocker、Kubernetesがベースのものです。
  • OpenShiftはKubernetesをベースに、RedHat社がエンタープライズ向けの機能拡張を加えたものになります。これにより、Kubernetesがより扱いやすくなります。
  • AWSの最近の注目の取り組みとして、コンテナ開発用のオープンソースクライアント「Finch」があります。これはAWS発のOSSであり、2021年に有料化が開始されたDocker Desktopの代替となる可能性があります。

ディレクトリサービス

AWSサービス名 説明 関連OSS
Simple AD ディレクトリサービス Samba4
  • Sambaは、UNIXおよびUNIX互換コンピュータを、Windowsのドメインコントローラーとして使用するためのOSSです。Simple ADは、AWS Directory Serviceの1形態として提供されています。

最後に

クラウド×オープンソースを組合せたサービスは、システムを効率的に構築していくための良い組合せであり、今後も増加していくと思われました。引き続きウォッチしていきたいと思います。

最初に述べたように、この記事が何か知るきっかけになれば幸いです。

37
29
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
37
29

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?