統計解析 ランクがある2つのリストの相関係数の算出にAverage Precisionを導入する方法
最近、『A new rank correlation coefficient for information retrieval』という論文を読みました。本論文では、ランクがある2つのリストにおける相関係数を算出するために、Average ...
yolo-kiyoshi
統計解析 
書評 『トークンエコノミービジネスの教科書』を読んだ感想
最近、日経の『「ソニーの車」を生む革命 ブロックチェーンの可能性』というニュースを読んで、ブロックチェーンが気になっています。中国ではコロナ禍以降、ブロックチェーンをベースにしたアプリが多数生まれていて、中国政府も積極的に推奨しているのだと...
レコメンド MPR(Mean Percentage Ranking)〜暗黙的にユーザの嗜好を得られるレコメンドシステムにおけるオフライン評価指標の紹介
レコメンドシステムにおけるオフライン評価指標の一つであるMPR(Mean Percentage Ranking)について書かれた論文を見つけました。今回はその調べた結果をまとめます。ちなみに、レコメンド文脈でのオフラインorオンライン評価と...
書評 『外資系コンサル流・「残業だらけ職場」の劇的改善術 「個人の働き方」も「組織の体質」も変わる7つのポイント』を読んだ感想
KindleのUnlimitedの対象になっていたので読んでみました。多くの企業がこぞって「働き方改革」を推進する昨今、確かに会社の制度として労働時間が厳しく規制されてきていると感じます。しかし、仕事量は労働時間を規制する以前とは変わらない...
書評 『いい緊張は能力を2倍にする』を読んだ感想
先日、AmazonでKindle本を物色している際にこの本がレコメンドされていました。なかなか高評価もついていて気になったので読んでみました。筆者は精神科医で、巷にあふれている精神論を唱えた本とは一線を画し、科学的な根拠を示しながら緊張への...
Kaggle タイタニック号の乗客の生存予測〜80%以上の予測精度を超える方法（モデル構築＆推論編）
本当に今更なテーマなのですが、以下の記事の後編を書きました。1年以上も前のお話です笑submitした結果が良くて満足してしまい、記事にするのを忘れていたようです。コメントいただいた方、ありがとうございました。さて、本編では前編での探索的デー...
レコメンド 代表的なレコメンド評価指標の実装と可視化
最近、業務でレコメンドシステムの評価指標（メトリクス）の調査に取り組んでいます。Precision@KやRecall@K、MAP@Kといったオフラインにおけるレコメンド指標の概要(簡単なsampleを使った説明)に関してはwebページの随所...
書評 『ビッグデータ分析のシステムと開発がこれ1冊でしっかりわかる教科書』を読んだ感想
つい先日、データエンジニアの方と「データサイエンス組織はプロダクトの開発でどこまで責任を持つべきなのか」という話をする機会がありました。組織が大きくなり、エンジニアリング/サイエンスの分業が進んでいるからこそ、その境目に関しての議論が出てく...
統計解析 大学のテストや統計検定で頻出の確率分布のまとめ
統計検定の試験勉強がてら、テストで頻出する確率分布を一覧化してみました。各々の確率分布の詳細に関しては、数理統計学をテーマにしている専門書や、webにアップされている大学の講義資料などで把握できますが、確率(密度)関数、期待値、分散、最尤推...
書評 『最高の結果を出すKPIマネジメント』を読んだ感想
以前から気になっていた本ですが、ようやく機会があって読みました。プロダクトの施策に関わるデータアナリスト/サイエンティストとして、もっと早くに読んでおくべき本だったと思いました。以下、本書を読んで思ったことです。ダメダメなKPIを設定してい...