Mac OS上にDockerを使ってkaggle kernelっぽい環境を構築
はじめに kaggleで使われるkernelと同じ環境を、local上に再現したい。 kaggle kernelはそれなりの性能をもったインスタンスだが、localマシンの方がより性能が良いので...
4
5
Comment0
26 search resultsShowing 1~20 results
Stocked
You need to log-in
Poetryに`The _posixsubprocess module is not being used.`などと言われる
解決したい問題 ubuntu18.04 に poetry をインストールして poetry --versionなどとした際に以下の警告が出る。 $ poetry --version /home/...
7
3
Comment0
Ubuntu 18.04でPoetryを動かしてみる。
この記事は何か? pythonのパッケージ&仮想環境管理ツール Poetry をインストールして動かしてみた記録。 基本的に公式マニュアルに書いてあることをやっているだけ。 環境 Ubu...
8
7
Comment0
BigQuery使いのためのMac環境設定
このドキュメントはなにか? 私のPC環境を再セットアップするときに読むためのドキュメント。 主にVSCodeでBigQuery用のクエリを書くための環境。 手順 基本 Home Brew htt...
0
1
Comment0
Ubuntu 18.04にCUDA9.0を入れてPyTorchを動かす
このドキュメントの内容 ubuntu18.04, CUDA9.0の環境下に、torch==1.0.1を入れる手順のメモ. 前提 OS: Ubuntu 18.04 GPU: GeForce GTX...
0
3
Comment0
ubuntu18.04にCUDA9.0をインストールする
このドキュメントの内容 Ubuntu 18.04にCUDA9.0をインストールする手順のメモ. 前提 OS: Ubuntu 18.04 GPU: GeForce GTX 1080 手順 nvid...
7
4
Comment0
Neovimをインストールして、ちょこっとpythonを書いてみる
概要 Mac OS X 10.13.6にNeovimをインストールして、pythonを書くために多少のカスタマイズを行った。 動機 基本的に普段の開発はVSCodeで行っていて、機能的に十分満足...
1
3
Comment0
Docker上のCentOS7にsqoopをインストールしたい
要約 hadoopは特に使わないがとにかくsqoopだけ使いたい需要があり、CentOS7にインストールしたので手順の記録を残す。 結論としてはCDH5でインストールしたら出来た。 正しい手順な...
1
1
Comment0
Python3.7 + Pipenv環境をUbuntu18.04 LTSに構築
Ubuntu18.04 LTS上にPython3.7 + Pipenvの環境を構築していった記録です。 必要なのでpipもインストールしています。 環境 OS: Ubuntu 18.04 LTS...
74
59
Comment0
skimage.io.imreadでどのプラグインが早いのか比べた
skimage.io.imread()する時に、バックエンドに使うライブラリを指定する事ができる。 この時、どのライブラリが高速に読み込みを行えるのか比べてみた。 環境や読み込むファイルの性質に...
1
1
Comment0
Python3 + Pipenv環境をMacに作る
macOSの調子が悪かったので、OSを入れ直した。 ひさしぶりにmacOSにpythonの環境構築をしたので手順をメモしておく。 出来るだけツールの公式が示している手順でインストールを行っていく...
5
5
Comment0
cufflinksでpearl02がValueErrorだと言われる件
この記事の概要 cuffkinksというpandasと相性抜群でめちゃくちゃ便利なプロットライブラリがあります。 https://github.com/santosjorge/cufflinks...
9
3
Comment0
DataFrame各列の欠損率を集計する
要約 df.isnull().sum() / len(df)で出来ます。 動機 DataFrame内の多数の列に対して、ありにも欠損が多い列を列ごとdropしたい。 その前に、そもそも各列がどの...
5
4
Comment0
DataFrameのランダムな位置を欠損させる
概要 numpy.random.choiceでdf.index, df.columnsからランダムな位置を選んでNoneを代入する。 準備 まず欠損がないDataFrameを作る。 中身は乱数。...
2
4
Comment0
mojimojiのインストールに失敗した件。もしくはPython.hが無いと言われた場合に疑うべき問題
この記事の概要 pythonの日本語処理ライブラリであるmojimojiをpipenvでインストールしようとしたら失敗した。 https://github.com/studio-ousia/mo...
3
3
Comment0
DockerコンテナをPipenvでセットアップする
この記事の概要 Dockerコンテナにインストールするpython packageをpipenvで管理する手順を説明します。 概要: DockerfileでホストOSからコンテナにPipfile...
42
33
Comment0
UbuntuのOSやCPU, GPUの情報を確認するコマンド
この記事の内容 UbuntuのshellからOSの情報と、CPU, GPUのハードウェア情報を確認するコマンドの解説をします。 UbuntuにCUDAやcuDNN, tensorflowをインス...
200
159
Comment0
CuPyの行列演算が驚異的に早かった
この記事の内容 Numpy-LikeなAPIを持ち、CUDAによってGPUを計算リソースとして使えるCuPyというライブラリがあります。 https://github.com/cupy/cupy...
16
12
Comment1
Ubuntuで、VSCodeがpipenv環境を読み込んでくれない
環境 Ubuntu16.04.3 VSCode: 1.24.1 pipenv: version 2018.6.25 症状 Pipfileが置いてあるディレクトリをVSCodeでOpenする。 V...
10
8
Comment0
Ubuntuでaptが上手く行かない時よく見に行くファイルとディレクトリ
トラブルシュートする時何かとよく参照するのでメモしておきます。 sources.list まず重要なファイルとしてsources.listが挙げられる。 これは、apt updateを実行した際...
13
17
Comment0
26 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles