Google Colaboratoryでnysol_pythonをインストールして使ってみる。
nysol_pythonの知名度は低いですが、実はかなりデータの加工や集計などの処理に便利なのでnysol_pythonについて、具体的な利用方法などを紹介 ...
4
6
Comment1
30 search resultsShowing 1~20 results
Stocked
You need to log-in
NYSOL(竹コマンド)が動かない場合の対処法
ared object file: No such file or directory - /home/hoge/lib/ruby/gems/2.4.0/gems/nysol ...
2
0
Comment1
Ubuntu24にコピペでさくっとNYSOLのMコマンドをインストールしてみる
コピペでNYSOLっていうかMコマンドをUbuntu24にインストールのメモです。 NYSOLってなに？ ホームページには以下のように書かれています。プロジ ...
1
0
Comment0
nysol(python) vs pandas pandas より、遅いけどメモリは食わない
nysolがそれほど速くなかった事例。 使用データ kaggle においてある国連データ から、2014年のデータ year_origin_destination_hs96_ ...
0
2
Comment0
ひっそり NYSOL:Mコマンドがバージョンアップしてた件について
一部の界隈ではとても人気のあるNYSOL：Mコマンドですが、実はVersion3が最近ひっそり公開されています。 注意 ※10月6日の段階ではMacでかつXcode9では、ビ ...
2
2
Comment0
nysol ( Mコマンド MCMD) (4) は、使えるか？
nysolをこれから使うと思っている人向けです。 pandas で貿易統計処理していて、やはり nysol だなと思いました。pandas がメモリエラーに ...
1
2
Comment0
100MB超えたらnysolが良さそう
野球データを速く集計したい (R vs nysol) はじめに R advent calendar, 12月10日分です. nysolを使ってみた, という ...
30
37
Comment1
nysol (MCMD) （3） nysol は、学ぶに値するか？(オフトピ)
nysolをこれから使うと思っている人向けです。 こんな人は該当します。 そこそこ大きなCSVを前処理している ざっとデータを見たり データの形式を整えたりなどの処理には、
0
0
Comment0
nysol (MCMD) （１） 4桁の文字列を、00 補完で６桁にする。
4桁の文字列を、６桁にする。 ※nysol を実際に触っている人向けの文章です。 nysol は、基本的なデータ処理機能があって、組み合わせで実現できるよう ...
0
0
Comment0
ひさしぶりに nysol
経済連携協定別時系列表を扱いやすい形式に、nysol で変換しました。pandas でやるのは面倒だったので、。。。 データは上記からのダウンロード(2012 から、2016 ...
0
0
Comment0
macbookairにnysol（にそる）をインストールしてみる
から本情報をいただきましたので、 早速やってみよう！と思ったと同時に、布教を目的に。 ※ちなみに主催者の方というのは後で気がついてガタガタしております。。。 ってかnysol ...
5
4
Comment0
巨大csvの整形を高速に行う便利パッケージ: NYSOL(MCMD)
たのでちょっとしたデータ整形をするだけでも死ぬほど時間がかかって辛いです。 処理の一部をsedやawkで置き換えて高速化を図るなど、涙ぐましい努力をしていましたが、NYSOL ...
38
43
Comment3
awkでcsvに任意の列を追加する
。 現代のCSVは数GBあることが普通なので…扱うデータが軽いなら使ってみてください。 UNIXでCSVを扱うコマンドはないの？→ある 私の__強い__おすすめは、NYSOL ...
14
9
Comment1
Nysol の Mコマンドで CSV ファイルをお手軽に解析
として、Excel でフィルターをかけて目視確認したり、Python の Pandas.DataFrame を用いて処理させたりすることもありますが、今回は Nysol の ...
6
4
Comment4
普通の人のためのデータ分析（2） 貿易統計を調べてみよう
ルでも扱うこと可能な量ではあります。 国別コード名前つき 2015年輸出のデータは、国コードしかないので、このデータで国名をつけくわえます。 輸出金額上位２０カ国 nysol ...
10
10
Comment0
普通の人のためのデータ分析（１） 大切なこと５項目
普通の人のためのデータ分析で思うことを書いていきます。 国産のデータ分析（前処理ツール） nysol(オープンソース） zap-in(商用） を応援しています。 データ分析で ...
3
3
Comment0
前々処理（序説）：サクサク使うSQL(エクセルだけから卒業)
ータ貿易統計でも、１０年分くらいで簡単に、100メガ超えます。エクセルしかつかえないと単純集計すらできません。そこで、１００メガくらいのデータを扱うソフトとしては、nysol ...
6
7
Comment0
nysol (MCMD) （2） 基準時を指定して指数を出す
基準時（年）を指定して指数を出す ※nysol を実際に触っている人向けの文章です。 基準年を使って指数を出すことはよくあります。単純な作業なので、エクセルでももちろんできま ...
0
0
Comment0
普通の人のためのデータ分析（4） 最新の貿易統計を取得して、CSVにする
貿易統計は、もっともアクセスが多い政府統計です。 kaggle ダウンロード数 １０００超えました 貿易統計は、一か月ごとに、集計されます。集計は速報から、HSコードという分類コードがきちんとつ...
31
28
Comment6
spark (pyspark) をCSVを取り込むだけに使う しかもwindows 10 で、(1) インストールまで
spark で、CSV を取り込むだけで結構苦労したという話です。 nysol と比べてベンチマークでどのくらい性能がでるのかをチェックするために、spark install ...
0
0
Comment0
30 search resultsShowing 1~20 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles