Python

Python

FlaskとKerasでオバマとスモーリングを自動判別するWebアプリケーションを作る -前編-

Nishipy 仕事ではインフラ周りのことしかしないので、お盆休みを利用し、FlaskとKerasで簡単なAIアプリケーションを作ってみます。前編では、作ったアプリケーションをローカルPCで動かしてみます。 概要 作ったFlask...
Docker

PrometheusのアラートをSlackに通知する

はじめに Nishipy Kubernetesクラスタの監視等の用途で、ここ数年よく耳にするPrometheusについてです。今回は簡単のために、docker-composeを用いてコンテナをデプロイします Prometheusと...
Python

東大松尾研「社会人向けデータサイエンスオンライン講座」を修了していました

はじめに Nishipy 東大松尾研が実施した社会人向け「Data Science Online Course」の第3期を受講し修了していました。初心者にもわかりやすいよい講座でした。先日修了証が届いたので、記念にまとめていきます。 ...
GCP

メッシの全ゴールデータを、BigQueryとData Portalで可視化する

Nishipy メッシとロナウドのこれまでの得点データを、Data Portalを用いて、綺麗に可視化してみます。 1. やりたいこと 2019年5月1日、チャンピオンズリーグ準決勝のリバプール戦において、メッシがクラブ通算600ゴ...
Python

メッシの全600ゴールデータをスクレイピングする

Nishipy メッシとロナウドがクラブ通算600ゴール達成したらしいので、これまでの得点データをスクレイピングしてみます。 1. はじめに 概要 2019年5月1日、チャンピオンズリーグ準決勝のリバプール戦において、メッシがクラ...
GCP

BigQueryに読み込んだTwitterデータを、Datalabで分析・可視化する

Nishipy AWSしか触ったことのない私が、BigQueryに読み込んだデータを、Google Datalabを用いて可視化してみます。 1. やりたいこと BigQueryにデータを読み込み(前回やった) BIgQuery上...
Python

自分のツイートから名詞一覧を取得する方法+いいねが多いツイートの分析

Nishipy せっかくMeCabをGoogle Colabで使えるようにしたので、久々にツイートの分析をしてみます。 1. はじめに 前回やったこと ↓の記事で、私(@iamnishipy)の全てのツイートを取得し、いいねが多い...
Python

クラス分類したいなら混合行列を忘れないこと

Nishipy Confusion matrix忘れがちなので、備忘録としてまとめます。 1. はじめに クラス分類のモデルを評価する指標として、混同行列(Confusion Matrix)が重要らしいです。 知ってはいるけど、...
MeCab

Google ColabでMeCabを使うまで。node.surfaceバグへの対処添え

Nishipy MeCabをGoogle Colabで使いたくなったときの備忘録です。2019年1月時点の最新バージョンだと、node.surfaceがうまく動かないことに注意します。 1. はじめに MeCabとは Wikipe...
Python

Pythonで自分のツイートをすべて取得する方法と、いいねが多いツイートの特徴

Nishipy 本ブログ用に作ったTwitterアカウントのフォロワーが1000人を超えました! 良い節目ですので、自分の今までのツイートをスクレイピングします。 そして、"いいね"数が多いツイートの傾向について、見ていきます。 ...