2
1

More than 1 year has passed since last update.

Google Apps Scriptで、S3のCSVをGoogleスプレッドシートに書き出す

Last updated at Posted at 2022-11-27

はじめに

Google Apps Script(GAS)を用いて、GoogleスプレッドシートからS3のCSVを取得する必要があったため、色々調べていました。
古いライブラリの情報等がヒットするなどで情報収集が大変でしたので、自分が調べた時点での方法を記事にしました。

追記(2023.04.25)

S3のファイルをGoogleDriveにダウンロードする方法も記事にしました。そちらも併せてご確認ください。

参考

やったこと

AWS

バケット、ユーザー作成

S3のバケットと接続用のユーザを、以下のCFnで作成します。

createBucketAndUser.yaml
AWSTemplateFormatVersion: 2010-09-09

Resources:
  InputfileBucket:
    Type: AWS::S3::Bucket

  UserForGas:
    Type: AWS::IAM::User
    Properties:
      Policies:
       -  PolicyName: S3Access
          PolicyDocument:
            Version: 2012-10-17
            Statement:
             -  Effect: Allow
                Action: 
                 - s3:GetObject
                Resource:
                 - !Sub arn:aws:s3:::${InputfileBucket}/*

アクセスキー作成

GASから接続する際に使用するため、ユーザのアクセスキーを作成し控えておきます。
image.png

image.png

以下のページでは、「Secret Access Keyにスラッシュがあるとエラーになる」とありますが、本記事の方法ではSecret Access Keyにスラッシュが入っていても問題ありませんでした。

最後の方に記載しますが、「ファイルパスに日本語が入っている場合」も同様のエラーが発生するので、このエラーが発生した場合はまずそちらを確認してください。

CSVデータ格納

テスト用に、以下のファイルをS3にアップします。

mobile-suit.csv
No,MOBILE SUIT,PILOT,AFFILIATION,型式番号,頭頂高,重量,DATA
1,ガンダム・エアリアル,スレッタ・マーキュリー,シン・セー開発公社,XVX-016,18.0m,43.9t,スレッタ・マーキュリーが学園に持ち込んだモビルスーツ。次世代群体遠隔操作兵器システム、ガンビットで構成されたシールドを装備している。
2,ディランザ グエル専用機,グエル・ジェターク,ジェターク寮,MD-0032G,18.2m,89.4t,ディランザをグエル向けにチューニングした仕様機。性能強化に留まらず、マゼンタの機体色や、華美な装飾なども施されている。
3,ガンダム・ファラクト,エラン・ケレス,ペイル寮,FP/A-77,19.1m,57.1t,ペイル社が開発したGUND-ARM。ブラストブースターの採用や、GUNDフォーマットによる慣性制御の高次化により、飛行性能が大幅に向上している。
4,ミカエリス,シャディク・ゼネリ,グラスレー寮,-,-,-,-
5,デミトレーナー チュチュ専用機,チュアチュリー・パンランチ,地球寮,MSJ-105CC,17.4m,63.5t,チュチュが搭乗する地球寮所属の機体。旧世代型のデミトレーナーをニカがカスタムした。
6,ディランザ,-,ジェターク寮,MD-0031,18.2m,85.3t,パワーに優れたジェターク社の汎用モビルスーツ。 積極的に要素を付加させる設計方針で、重量級のスタイルを得ている。
7,ザウォート,-,ペイル寮,-,-,-,ペイル社が開発したモビルスーツ。大型推進ユニットを装備し、 単独での飛行能力を有している。
8,ハインドリー,-,グラスレー寮,CFP-010,18.4m,52.0t,グラスレー社の量産モビルスーツ。ハンドガンとランスが組み込まれたランタンシールドを装備。
9,デミトレーナー,-,-,MSJ-121,16.2m,59.3t,ブリオン社製の学園内訓練用モビルスーツ。アスティカシア高等専門学園のあらゆるカリキュラムで運用されている。
10,デミギャリソン,-,-,-,-,-,デミシリーズの戦闘特化仕様。フロント管理社では警備モビルスーツとして正式運用されている。
11,ダリルバルデ,グエル・ジェターク,ジェターク寮,MD-0064,18.7m,72.8t,ジェターク社による第5世代実証機。意思拡張AIによって自律行動を行う新型ドローン兵器を装備している。
12,ディランザ・ソル,-,ジェターク・ヘビー・マシーナリー,-,-,-,ジェターク社の実戦用モビルスーツ。自動追尾タイプのクラスターミサイルを射出するHCミサイルランチャーを背面に装備している。
13,ザウォート・ヘヴィ,-,ペイル・テクノロジーズ,-,-,-,ペイル社の実戦用モビルスーツ。オプション装備のミサイルランチャーとビームキャノンによる重武装仕様を選択している。
14,ハインドリー・シュトルム,-,グラスレー・ディフェンス・システムズ,-,-,-,グラスレー社の実戦用モビルスーツ。中・長距離戦闘を主眼とした武装構成が採用された。
15,ディランザ ラウダ専用機,ラウダ・ニール,ジェターク寮,MD-0031L,18.2m,91.1t,ラウダの操縦特性に合わせて調整が施されたディランザの仕様機。大型ヒートアックスを装備している。

以下の様にバケットに配置します。
パスに日本語が混じっている場合、若干注意が必要なので、日本語フォルダ名の下に同じファイルを置いています。

[InputfileBucket]
├─g-witch
│   └─mobile-suit.csv
│
└─水星の魔女
    └─mobile-suit.csv

Google スプレッドシート

適当なフォルダにスプレッドシートを作成します。

Apps Script編集画面へ

[拡張機能]-[Apps Script]を選択。
image.png

S3ライブラリの追加

以下のページを参考に行います。

ライブラリを選択。
image.png

スクリプトIDに1Qx-smYQLJ2B6ae7Pncbf_8QdFaNm0f-br4pbDg0DXsJ9mZJPdFcIEkw_を入力。
image.png

左に追加されていることを確認。
image.png

スクリプト

以下のスクリプトをエディタ上に追記します。
バケット名、アクセスキー、シークレットアクセスキーは、使用する文字列に置き換えてください。

コード.gs
function main(){
  const bucketName = "[InputfileBucket]";
  const fileName = "g-witch/mobile-suit.csv";

  const data = getS3File(bucketName, fileName);
  const values = Utilities.parseCsv(data.getDataAsString());
  SpreadsheetApp.getActiveSheet().getRange(1, 1, values.length, values[0].length).setValues(values);
 }

/**
 * S3からファイルをロード
 * @params {string} bucketName - 読み取りたいS3のバケット名
 * @params {string} fileName - 読み取りたいファイル名
 */
function getS3File(bucketName, fileName) {
  // S3の接続情報
  const ACCESS_KEY_ID = "[ACCESS_KEY]";
  const SECRET_ACCESS_KEY = "[SECRET_ACCESS_KEY]";

  const s3 = S3.getInstance(ACCESS_KEY_ID, SECRET_ACCESS_KEY); 
  // バケット名とファイル名を指定してファイルの中身を取得
  const data = s3.getObject(bucketName, fileName);
  return data;
}

実行

上部の”実行”から動かします。
image.png
初回は承認が求められます。
image.png
image.png

image.png

image.png

許可しますと、S3に置いたCSVのファイルがシート上に展開されます。
image.png

パスに日本語が混じっていた場合

ファイル名を以下の様に修正します。

  // const fileName = "g-witch/mobile-suit.csv";
  const fileName = "水星の魔女/mobile-suit.csv";

この状態で実行すると、以下のようなエラーになります。
image.png

この場合はURIエンコードします。

  // const fileName = "g-witch/mobile-suit.csv";
  // const fileName = "水星の魔女/mobile-suit.csv";
  const fileName = encodeURI("水星の魔女/mobile-suit.csv");

もしくはS3の対象ファイルのオブジェクトURLのkey部分の文字列を使っても可能です。
image.png

取得できました。
image.png

おわりに

Google Apps Scriptを初めて使いましたが、かなり便利と感じました。
他にも接続したいサービスがあるので、もっとモジュールがあると助かります。

2
1
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
2
1