React Recoil事始め
はじめに React/React Nativeの新しいState managementとしてRecoilと言うのがReleaseされています｡ Recoilを使って超簡単なアプリを作って､Rec...
21
14
Comment0
33 search resultsShowing 1~20 results
Stocked
You need to log-in
Docker視点で見るSupervisorの使い方
Docker初心者なので、Dockerを活用する上でのSupervisorの使い方, Tipsをチラ裏しておきます。 そもそもSupervisorとは この記事とかが参考になりますが、そもそもは...
157
133
Comment1
Spark DataframeのSample Code集
はじめに：Spark Dataframeとは Spark Ver 1.3からSpark Dataframeという機能が追加されました。特徴として以下の様な物があります。 Spark RDDにSc...
164
175
Comment1
Noto SansをWeb font化しようとした時にハマった話
Googleが、Noto SansというFontをOpen Source Licenseで配布を始めました。 Noto Sansの日本語/中国語簡体字版のFontをWeb Font化しようとして...
52
47
Comment0
Jupyter事始め
はじめに Jupyter初心者なので、AWS EC2上の環境構築方法、簡単な使い方を半年後の自分用にチラシの裏しておきます。 細かい設定はさておき、手っ取り早くEC2上にJupyter環境を構築...
528
582
Comment9
Kaggle事始め
はじめに データ解析の情強な方なら、Kaggle はご存じだと思います。データ解析のSkillを競うCompetitionサイトで、与えられたテーマ(Dataset)に対して、世界中のデータ解析...
789
794
Comment3
Spark + IPython環境をAmazon EMR上で構築し、簡単なData解析を動かして見る (第1回：環境構築編)
はじめに 2015/6にAmazon EMRでSparkが標準サポートされました。これにより、EMRでSpark Clusterを起動すれば、ものの10分ぐらいでSpark + IPythonの...
89
91
Comment0
MacBookを開発環境に設定していくメモ
今までずっとWindows PCをメールやCodingに使っていたのですが、この度、生まれて初めてMacにしました。Mac超ど素人なのでWindowsとの違いに色々面喰らっていますが、変更した設...
21
29
Comment0
Jupyter Lab事始め
はじめに Jupyterは次のVersionより Jupyter Lab として大きくUIや機能が進化する予定です。ここでは、AWS EC2上でJupyter Labの環境を構築方法、簡単な使い...
81
85
Comment1
Vagrantのrsync時に、Host側に無いFileがVM側から削除されるのを回避する方法
はじめに Client系の開発環境を構築しようとVagrantを使ったのですが、Vagrantのrsyncでややハマッた時ので、その解決策をチラ裏しておきます。 やろうとしたこと Vagrant...
20
22
Comment0
Spark + IPython環境をAmazon EMR上で構築し、簡単なData解析を動かして見る (第3回：機械学習編)
はじめに 第2回目でSpark ClusterにAccess Logを喰わせてKPIの算出(DAUやDaily Unique User)を行いましたが、今回は同じAccess LogをSpark...
13
15
Comment0
Spark + IPython環境をAmazon EMR上で構築し、簡単なData解析を動かして見る (第2回：KPI算出編)
はじめに 第1回目で立ち上げたSpark ClusterにAccess Logを喰わせて、色々処理を廻してみる部分をチラシの裏しておきます。 (第1回)Amazon EMR上でのSpark Cl...
16
17
Comment0
Pycharmの "pep8 indentation is not a multiple of four"や"Variable in function should be lowercase" という警告を抑制する方法
はじめに Pythonの開発はPycharmを使っています。 PythonのCoding styleの警告である Variable in function should be lowercase...
9
13
Comment0
AWS Android SDK for Kinesis Firehoseを動かして見る
はじめに 以前、Kinesis Firehoseを動かして見るでもチラシの裏しましたが、Kinesis Firehoseは、Backend Serverを自分で構築/管理せずとも、Android...
6
5
Comment0
AWS LambdaでPythonをSchedule実行させる
はじめに 2015/10のAmazon re:Invent 2015で、Lambdaに関して幾つかの機能追加が発表されました。 個人的に大きいのは以下の3つです。 Lambda function...
61
62
Comment0
AWS Data PipelineでPython Scriptを周期実行させる
はじめに AWS上でPython Scriptを定期的に実行させたい、というNeedsは結構あると思います。EC2を立ててcronで実行させる事で実現できますが、ここではAWSのData Pip...
14
16
Comment0
AWS Kinesis Firehoseを動かして見る
はじめに 2015/10のAmazon re:Invent 2015でKinesis Firehoseが発表されました。 AWSが外部に一般供用するKinesis FirehoseはIoTなどの...
25
28
Comment0
DynamoからRedshiftに大量のDataをCOPYした時にハマった話
はじめに DynamoDBにある約150GBのDataをRedshiftにImportしようとしてハマったので、解決方法をチラ裏しておきます。 以下の順番で試したのですが、結局#3が正解でした。...
7
8
Comment0
Mongo DB操作をcommand lineから行う
初めに Mongo DBを操作する一番てっとり早い方法は、Mongo shell (cli)を操作する方法です。 show dbs use xxx(dbの名前) show collections...
16
16
Comment0
AWS LambdaをCronっぽく周期実行させる
はじめに AWS LambdaはEvent Drivenに設計されており、Cron Jobの様なSchedule Drivenで起動する事は想定されていません。LambdaをScheduleで起...
24
23
Comment0
33 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles