0
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 3 years have passed since last update.

SQLのAS句を、pandas(python)をrenameメソッドを使って表現して見た

Last updated at Posted at 2020-09-26

#はじめに
 最近、プライベートでデータ分析のツールを作成している関係でpandasというpython外部ライブラリを活用している。が、いざ使って見ると、「pandas?なにそれかわいいの?」と動物のパンダ🐼を連想させるヤバい思考に行きつつある状況になる。
 これはまずいと感じ、投稿者はpandasを探し求める旅に出る。
 この記事は、pandasを飼いならすためにpandasをSQLっぽく考えるというデータサイエンス初学者に向けた記事となります。

#そもそもpandasとは何か
 pandasとは、構造化された(表形式、多次元、潜在的に不均質)データと時系列データを簡単かつ直感的に操作できるように設計された高速で柔軟な表現力のあるデータ構造を提供するPythonパッケージで、実際的な実世界のデータ分析を行うための基本的な高レベルのビルドを行う事が可能なツールです。
 要は、表データをpythonを使っていい感じに処理して目的のデータ抽出するツールです。

#実践
###準備
今回は下記の表データ【receipt】を用いてpandas攻略を行います。(表データはCSV形式)

1-1.png
※データは長いので冒頭部分のみ表示

参考データ:データサイエンス100本ノック
https://github.com/The-Japan-DataScientist-Society/100knocks-preprocess

また、今回はpandasを使用するため、コードは下記のように予め準備しておきます。

python
import pandas as pd
df_receipt = pd.read_csv('receiptのCSVファイルのパス', sep=',')

###本題
タイトルにある通り、今回はSQLのAS句をpandasを使って再現します


問題:レシート明細のデータフレーム(df_receipt)から売上日(sales_ymd)、顧客ID(customer_id)、商品コード(product_cd)、売上金額(amount)の順に列を指定し、10件表示させよ。ただし、sales_ymdはsales_dateに項目名を変更しながら抽出すること。

目的:表の特定の列の列別名を出力する事

###解答

解答を記述するとこんな感じになります。

pandas(python)
df_receipt[['sales_ymd', 'customer_id', 'product_cd', 'amount']].rename(columns={'sales_ymd': 'sales_date'}).head(10)

そして、図に表すとこんな感じになります。

image.png

これをSQL文で表すとこんな感じになります。

SQL
SELECT sales_ymd AS sales_date,customer_id,product_cd,amount FROM receipt LIMIT 10;

###解説
それでは、ここから解説していきます。

  • SQLのAS句を、pandasのrenameメソッドを用いて表現する

    まず、pandasの二重リストを活用し、表全体から対象の列名を選択します。

※補足:pandasの二重リストに関する記事は下記を参考にしてみて下さい。
https://qiita.com/syuki-read/items/9fcb06ff56b868167f85

pandas(python)
df_receipt[['sales_ymd', 'customer_id', 'product_cd', 'amount']].head(10)

これをSQLで考えると、こんな感じになります。

SQL
SELECT sales_ymd,customer_id,product_cd,amount FROM receipt LIMIT 10;

FROM句:データベース内の指定する表を選択する
SELECT文:指定した表から抽出すべき列を選択する
LIMIT句:抽出する行数を指定する

図に現すとこんな感じになります。

image.png

そしてここから、pandasのrenameメソッドを用いて、(SQLのAS句のように)対象の列名(sales_ymd)を指定の列別名(sales_date)に変換を行います。
書き方は、rename(columns={'変換前の列名': '変換後の列名'})と表現します。

実際に書いてみるとこんな感じになります。

pandas(python)
df_receipt[['sales_ymd', 'customer_id', 'product_cd', 'amount']].rename(columns={'sales_ymd': 'sales_date'}).head(10)

これをSQLで考えるとこんな感じになります。

SQL
SELECT sales_ymd AS sales_date,customer_id,product_cd,amount FROM receipt LIMIT 10;

そして、図を表すとこんな感じになります。

image.png

  • 全体図

    全体をまとめると、こんな感じになります。

3-1new2.png

###別解

pandas(python)
df_receipt.rename(columns={"sales_date": "sales_ymd"}, inplace=True)
df_receipt[['sales_ymd','customer_id','product_cd','amount']].head(10)

こちらの場合ですと、先に対象列を指定の列別名に指定し、その後対象の列の選択を行っております。

#まとめ
pandasを使って、SQLのAS句の表現を行いました。pandasはデータベース及びSQLを意識したpythonライブラリなため、普段からSQLを意識するとかなり使いやすいツールだと改めて感じます。また、特定の命令文を指示する時、SQLがいくつものパターンがあるように、pandasにも多様なパターンが存在すると、pandasを活用して日々実感を持ちます。

#終わりに
 今回、利活用したデータはデータサイエンス協会(DS協会)の「データサイエンス100本ノック」を参考にしております。こちらはJupyter notebookを使用しているので、より見やすいデータが抽出されます。
 この記事を読んで、「実際に実装してみたい!!」という方がおりましたら、下記にその実装に関する記事を上げているので、良かったそちらの記事を参考に是非実装してみて下さい。

データサイエンス初学者にむけた、データサイエンス100本ノックを実装する方法:
https://qiita.com/syuki-read/items/714fe66bf5c16b8a7407

0
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?