ポエムな記事。
研究で得た知見(べき分布やシミュレーション、行動経済学、複雑系など)を元にデータを活用してサービスをグロースさせることが現実に可能なことを民間企業で最初に経験できたことが今の自分(データサイエンティスト)の原点になってる。
最初はグロースのことしか考えてなかったけど、いろいろ経験していく中で、これからはグロースだけでなく、サービスを通して行動変容を促進し世の中の規範や慣習を少しづつ変えて豊かっぽい社会(至極普通に生活しているだけで個人と全体の幸福がなぜか高まっていく世界)を実現していきたい、という思いが強くなってる。
幸福の定義は難しそうな感じもするけど、流動性の増大≒幸福の増大と仮定(多様な価値を持つ人々が多様な商品を交換することで価値の総量が増大するという塩沢先生の理論参照)すれば、その指標化は可能そうだしその指標を高める施策はいくらでも設計できそうだから自分的には豊かっぽい社会の実現はそんなに難しくない。と、最近思いがち。
データ分析ポエムでした。
データ分析に関する備忘録。主にR言語を使ったデータの前処理や統計、機械学習などの方法を記録。ビッククエリとトレジャーデータがお気に入り。オフラインとオンラインの連携が最近のマイブーム。
注目の投稿
【kepler.gl】コロナ対策による人流の変化も地図上に可視化(各種メディアで報道)
kepler.glのサイト画面 kepler.glを使ってコロナ対策の効果を分析したところ、テレビ、新聞、ネットのメディアから問い合わせや報道依頼が殺到。今も、土日返上で都内や全国の人流変化を分析しています。この記事では人流変化の可視化に便利なkepler.glにつ...
2019年8月6日火曜日
2019年7月13日土曜日
【動画紹介】Pelion Data Management Service『トレジャーデータ』の紹介
トレジャーデータを使ったセグメントや機械学習の簡単なデモ
ラベル:
Treasure Data
,
トレジャーデータ
,
動画
2019年7月12日金曜日
R 任意の行でデータを分割
【目的】 任意の行でデータを分割する
【方法】 データ名[最初の行:最後の行]
#テスト用データを作成
library(data.table) #データテーブル作成のために読み込む
【方法】 データ名[最初の行:最後の行]
#テスト用データを作成
library(data.table) #データテーブル作成のために読み込む
> data <- data.table(No = 1:10,random = runif(10, min = 0, max = 1))
> data
No random
1: 1 0.301603490
2: 2 0.745845367
3: 3 0.559383677
4: 4 0.737294025
5: 5 0.525487942
6: 6 0.361071876
7: 7 0.259251202
8: 8 0.002998326
9: 9 0.909486709
10: 10 0.895856187
>
*runifで0~1までの実数をランダムに生成
#3行目までを分割する
> data_a <- data[1:3]
> data_a
No random
1: 1 0.3016035
2: 2 0.7458454
3: 3 0.5593837
>
あれ、randomの値が四捨五入されてる??
#dataを半分に分割する
*lengthでベクトルの長さが分かるのでそれを2で割れば半分に分割できる
> data_1 <- data[1:(length(data$random)/2)]
> data_2 <- data[(length(data$random)/2+1):(length(data$random))]
> data_1
No random
1: 1 0.3016035
2: 2 0.7458454
3: 3 0.5593837
4: 4 0.7372940
5: 5 0.5254879
> data_2
No random
1: 6 0.361071876
2: 7 0.259251202
3: 8 0.002998326
4: 9 0.909486709
5: 10 0.895856187
>
data_1は四捨五入されてるけど、data_2は元の値だ。なぜ??
2019年7月6日土曜日
【動画紹介】Exploratory: 決定木の紹介と使い方
役立ち動画発見!
データ分析の目的から決定木の説明に入るので、なぜ決定木を使う必要があるのかが良く分かる
動画の流れ
- データ分析とは、「相関」、「パターン」を見つけること
- たくさんデータがあると一つ一つ関係を見ていくのは大変
- 機械学習(決定木など)で「相関」や「パターン」のあてを見つける
- 決定木とは何か?どのように木を作るか?などを紹介
木をどうやって作るかはあまり説明されないことが多いけど、不純度(Gini Iimpurity)を減らすことで、木を作っているという説明もちゃんとされていてナイス!
ちなみに、不純度は、データにどれだけ値が混ざっているかを示す指標で、1から各サンプル数の割合を二乗したものを引いたもの
例:6人のうち2人が大人、4人が子供の場合
不純度 = 1 - (2/6)^2 - (4/6)^2
^2は二乗の意味
2018年4月3日火曜日
2018年2月17日土曜日
【速報】藤井五段、史上最年少朝日杯優勝。藤井六段に
![]() |
| 第11回朝日杯トーナメント |
藤井五段は準決勝で羽生竜王を完封。決勝でも勢い収まらず広瀬八段を破り優勝。その結果、六段に昇段し、藤井六段誕生へ。
心の声1「初手から詰将棋のようだ」
心の声2「まるでマンガだな…」
心の声3「もう国民栄誉賞でもいいのでは」
2018年2月6日火曜日
登録:
投稿
(
Atom
)

