KIYOSHI'S NOTES

記事一覧

2020-11-01

統計解析パッケージPingouinを使ってみる

Mediumを眺めていたらこんな記事を見かけました。今回は実際にPingouinを使ってみた感想を述べたいと思います。コードはGitHubにあげています。 Pingouinは統計解析パッケージの1つで、シンプルな記述であるにもかかわらず、…

2020-10-27

以前、こちらの記事を読み、キーエンスという企業に興味を持つようになりました。本書では、キーエンスの経営哲学である「付加価値の最大化」をどうやって社員に伝え、なぜ創業から今に至るまで実現できているのかをわかりやすくまとめています。その中で…

2020-10-22

Google社が開発した自然言語処理モデルBERTですが、使い方次第では様々なタスクで高い精度を得られるものの、そのパラメータの多さゆえに推論にかなり時間がかかります。そのためBERTを実運用しようとすると、処理時間がボトルネックになって頓…

2020-10-19

最近案件でBERTを使う機会がありました。 Hugging Face社が公開している英語版のBERTや東北大の乾・鈴木研究室が公開している日本語版BERTであれば自前のtokenizerで学習あるいは推論対象のテキストを単語分割しても問題あ…

2020-09-02

前回に引き続き、推薦システムで用いられるレコメンド手法を紹介していきます。今回のテーマは協調フィルタリング(Collaborative Filtering)の実装方法です。協調フィルタリングは、多くのユーザから嗜好データを収集することで、ユ…

2020-08-26

以前、「推薦システムの手法のまとめ」という記事を書きました。ということで、今回から2回くらいに分けて推薦システムで用いられるレコメンドモデルの実装方法を紹介します。まず1回目は、コンテンツベースフィルタリング（content base f…

2020-08-22

つい先日、職種を超えて提案書を作成するノウハウを身に付けてもらうことを目的に、社内で提案書作成講座が開かれました。その講座に参加する準備として、まずは企画する力について勉強しておこうと思って本書を読みました。実は以前、本書の著者である田坂…

2020-08-16

レコメンドタスクでgensimのWord2Vecを利用する場合、特定のword(アイテム)を除外した上で類似度上位N件をmost_similarで出力したいことがあると思います。しかし、現時点のgensimのWord2Vecではmost_s…

2020-08-15

最近、自然言語処理関連の仕事でBERTを使うことになり、まずはお手軽に試せるライブラリはないかと探していたところ、ktrainというライブラリがあることを知りました。「ktrain: A Low-Code Library for Augme…

2020-08-02

ROC曲線って、使わないとすぐに解釈の仕方を忘れてしまいます。縦軸や横軸が何を表していて、何を基準にプロットしていくのか、毎回使うときにググってしまう今日この頃です。ということで、今回は自分の記憶の整理をかねてROC曲線の可視化を実施し、…