ビジュアライゼーション 東京五輪マラソン開催地で話題の札幌と東京の平均・最高気温のトレンドをTableauで可視化してみた
東京五輪マラソンの開催地が札幌に決まりました。ニュース番組を見ていると、「札幌だって東京より暑い日がある」とか「札幌は涼しくない」とかいう発言を多々見受けるので、実際に気象データを取得して確認してみました。なお、筆者はチケットも購入していな...
yolo-kiyoshi
ビジュアライゼーション 
レコメンド 行動履歴をもとに協調フィルタリングとWord2Vecでレコメンドしてモデルの精度を評価する
レコメンド関連の勉強のために使えるデータを探していたところ、Kaggleで丁度良いデータセットがあったので、今回はユーザの行動履歴をもとにアイテムをレコメンドする方法とそのレコメンドモデルを評価する方法を説明します。使用するアルゴリズムは古...
書評 『ビッグデータ探偵団』を読んだ感想
会社のマネージャーや同僚に勧められて読んでみました。『ビッグデータ探偵団』というザ・ITワードには似つかない可愛らしいタイトルに遜色なく、データ分析に携わる方から現場の営業の方まで幅広く読むことができる本だと思いました。ざっくりと内容を説明...
Kaggle ExploratoryでKaggleのHouse Priceをやってみる
前回の投稿でベイジアンA/Bテストを紹介しましたが、その際に参考にした記事でExploratoryというツールが用いられていました。調べてみると、ExploratoryではベイジアンA/Bテストはもちろんのこと、データの可視化やモデル構築ま...
統計解析 施策効果の測定にはベイジアンA/Bテストを使おう！
クライアント先のデータサイエンティストから、「施策検証といえば普通はA/Bテストだけど、ベイジアンA/Bテストというモダンな手法があって面白いよ！」と勧められたのでいろいろ調べてみました。なるほど確かに、ベイジアンA/Bテストかなり使えます...
機械学習 決定木アルゴリズムの重要度(importance)を正しく解釈しよう
機械学習案件で、どの特徴量がターゲットの分類で「重要」かを知るためにRandamForestやXGBoostなどの決定木系アルゴリズムの重要度(importance)を確認するということがよくあります。ただ、この重要度がどのように計算されて...
機械学習 Appleが公開している機械学習ライブラリTuri CreateでKaggle Titanicをやってみる
Twitterで呟いたり、Qiitaに投稿したりでブログがおろそかになっていました。。。ということで、久々のブログ更新です。今抱えている案件の一つにレコメンドシステム関連があって、業務に使えるいいネタはないかといろいろ調べ物をしていたところ...
その他 Tableauでカレンダー形式のダッシュボードを作成する方法
久々の投稿になります。今期から新人の技術面でのメンターになり、とあるMLプロジェクトの精度検証などのモニタリング課題を新人と伴奏することになりました。モニタリングはTableau Serverで行うことになったので、ただいま新人くんにTab...
統計解析 統計学と機械学習におけるマルチコ（多重共線性）に対する考えの相違
先日、デスマーチの末なんとか機械学習案件のリリースに漕ぎ着けました。今回の案件に関わらないですが、要件や仕様はしっかり明文化しておくべきですね。後から(特にリリース間近になって)言った言わないの議論になるのは双方にとってあまり気持ちのいいも...
登山 雪崩から生還〜山岳事故に巻き込まれるリスクを考える
割とショッキングな話ですが、つい先日、残雪が残る北アルプスに登山にいき、雪崩に巻き込まれました。私たちのパーティ含め5〜7名が雪崩に巻き込まれましたが、全員の無事を確認でき大事に至ることはありませんでした。こんな経験は人生で2度はしないだろ...