RabbitMQ Dockerコンテナでメッセージを永続化する方法
プライベートな開発で複数のDockerコンテナで並列処理を実装する必要があり、複数コンテナのタスクを管理するためにRabbitMQというOSSのメッセージブローカーを使い始めました。RabbitMQのデフォルト設定だと、サーバーが停止したり…
KIYOSHI'S NOTES
Docker
Torで接続元を匿名化してスクレイピングしてみる
Torネットワークを使うことで接続元IPアドレスを秘匿化してWebスクレイピングできるかを検証してみました。 Webサイトをスクレイピングする際、同じIPアドレスからリクエストし続けると運営側からアカウントをBANされるリスクがあります。処…
selenium Dockerイメージを使ってPairsで足跡を自動で付けてみた
最近Webやネイティブアプリのスクレイピングに興味があります。実際にスクレイピングアプリを作りながら学んでいこうということで、手始めにPairsを題材にコードを書いてみました。※Pairsは週に数回閲覧するかどうかくらいのライトユーザーです…
Py-Featでお手軽に表情認識をやってみた
Mediumのこちらの記事で、Py-Featというお手軽に表情表現(Facial Expression: FEX)を解析できるツールキットの存在を知ったのでさっそく試してみました。今回は公式チュートリアルのうちの、画像からの表情認識をやって…