ミナピ@データアナリスト

heroku

【Heroku】sqlalchemyのcreate_engineがエラーになった話

~~~~ from sqlalchemy import create_engine ~~~~ engine = create_engine('postgres://~~~', echo = False) <...
Python

【Python】ヤフーファイナンスから日本株個別銘柄の株価データをスクレイピングする

こんにちは、ミナピピン(@python_mllover)です! 今回はPythonを使ってヤフーファイナンスの株価データをスクレイピングで取得したいと思います。 ヤフーファイナンスから株価データをスクレイピン...
Python

WordPressのREST APIで画像アップロードを自動化する

こんにちは、ミナピピン(@python_mllover)です 前回はワードプレスのRESTAPIでブログへの記事投稿を自動化しました。その際に画像のアップロードについては紹介していなかったので今回は画像のアップロード方...
Python

【2021年版】Python+Seleniumでツイッターに自動でログインしてツイートする

こんにちは、ミナピピン(@python_mllover)です 久しぶりにTwitterに自動ログインする必要があったので昔に書いたコードを実行したところ案の定HTML要素が変わっていてエラーを吐いたので2021年版とし...
BigQuery

【BigQuery】DATE_DIFF()で日付の差分を計算する

今回はBigqueryで日付の差分を計算して、経過日数を計算する処理を紹介したいと思います。 BigQueryで日数を計算する bigqueryでは「DATE_DIFF」という関数で第1引数と第2引数の差を日/月...
pandas

エクセルの複数シートにデータフレームを出力・追記する

こんにちは、ミナピピン(@python_mllover)です。 今回は案件でスクレイピングしたデータをエクセル(.xlsx) のシートにまとめるということを行ったのですが、まずPythonではpandasのdf.to_...
Python

【Python】WordPressにAPI経由で記事を投稿すると「500 db insert error」が返される

こんにちは、ミナピピン(@python_mllover)です。 特定のサイトの情報をスクレイピングして投稿するプログラムを作成したのですが、時々、投稿がDBに登録されず、ずっと悩んでいたのですが、ようやく原因が見つかり...
Python

【Python】ウマ娘のアプリレビューをスクレイピングしてワードクラウドを作ってみた

こんにちは、ミナピピン(@python_mllover)です。 今回はウマ娘のレビューをスクレイピングしてワードクラウドにしてみましたので結果の紹介になります。 # ライブラリのインストール ! pip insta...
BigQuery

【SQL/BigQuery】分析関数で移動平均を集計する

SELECT 日付, 値, AVG(値) OVER (ORDER BY 日付 ROWS BETWEEN 3 PRECEDING AND 3 FOLLOWING) AS 移動平均 FROM (日付ごとに値...
Python

【Python】spacyのload()でja_ginzaがPATHエラーを吐くときの対処法

こんにちは、ミナピピン(@python_mllover)です。spacyで日本語の形態素解析をしようとしたら以下のようなエラーに遭遇したので解決法をメモしておきます !pip install -U ginza impor...
タイトルとURLをコピーしました