データ分析備忘録 in Tokyo
データ分析に関する備忘録。主にR言語を使ったデータの前処理や統計、機械学習などの方法を記録。ビッククエリとトレジャーデータがお気に入り。オフラインとオンラインの連携が最近のマイブーム。
2016年11月24日木曜日
東京新宿54年ぶり11月に雪 2016-11-24
8時くらいの防衛省周辺の様子。いつもは左の方に見えるスカイツリーも雪で見えない。
2016年11月16日水曜日
【トレジャーデータ】データベース名が数字の場合(sql:presto)
データベース名の先頭が数字の場合通常ならエラーとなるが、""でDB名を囲むことでエラー回避できる。
例
FROM
"1_db". tb
2016年11月8日火曜日
【R】data.tableとdplyrの内容が良くまとまっているページ
Rで大規模データの処理をするには、data.tableとdplyrが必須です。
下記のページは、その内容が簡潔にまとめられていて非常に参考になります。
大規模データの高速処理 ーdata.table、dplyrー
http://kohske.github.io/ESTRELA/201410/index.html
特に、他のサイトではあまり紹介されていないキーの設定の説明があるところ良いです。
setkey(dt, key)
d: データテーブル
key: キーとなるカラム名
これだけでデータ集計が高速に!
‹
›
ホーム
ウェブ バージョンを表示