自動化

Python

【Python】Yahooメールの宛先・題名・本文を自動取得する

こんにちはミナピピンです。 案件でYAHOOメールの受信内容を読み取る処理を実装したので、その際の知見をメモしておきます。 前準備 YAHOOメールのSTMPを使用する場合、事前にSTMP経...
Python

【Python】「icrawler」を使ってウェブ検索結果の画像をまとめてダウンロード・スクレイピングする

今回はicrawlerというライブラリでウェブから画像を一括でダウンロード・スクレイピングするサンプルコードを紹介したいと思います。 ライブラリのインストール # icrawlerをインストールする $ pip i...
Python

【Python】TweepyでTwitterAPI_V2のAPIを使ってツイートするサンプルプログラム

こんにちは、ミナピピン(@python_mllover)です。 今回はTweepyで2021年に新しく公開されたTwitterAPI V2のAPI鍵を使ってツイートする方法を紹介したいと思います。(Tweepyのバージ...
Python

【Python】AmazonのPA-APIで商品情報をスクレイピングする

こんにちは、ミナピピン(@python_mllover) です! この前案件でAmazonのAPIについて調査したのでAPIの種類やPythonでの叩き方について自分用にまとめておこうと思います! A...
Python

【Python】openpyxlで「Excelの数式」の読み込み・書き込み

最近業務でエクセル処理をPythonで自動化しようとしていたのですが、エクセルの関数がうまく反映されず少しハマったので調べたことをメモしておきます。 # インストール $ pip install openpyxl ...
Python

Pythonで画像・動画をスクレイピングして自動ダウンロードする

最近メンターでスクレイピングしたURLから画像や動画を実際にダウンロードするにはどうすればよいか、みたいな質問が多いので、この記事にまとめておこうと思います。 画像や動画をローカルのPCに出力・ダウンロード書き出すのは...
Python

Pythonでスプレッドシートの読み書きを自動化する

こんにちは、ミナピピン(@python_mllover)です。今回はPythonを使ってgoogleスプレッドシートを操作する(読み込み・書き出し・追記処理など)方法について紹介したいと思います。 前準備 Pytho...
Python

【Python】geopyで緯度経度から2点の直線距離を計算する

こんにちは、ミナピピン(@python_mllover)です! 案件でGoogleMapのAPIを使って取得した緯度経度の情報から直線距離を計算する必要があったのですが、その際にgeopyというライブラリが非常に便利だ...
Python

CentOSのVPSサーバーでPython+Selenium+ChromeDriverのスクレイピング環境を構築する

こんにちは、ミナピピンです。 先日クラウドワークスの依頼でレンタルサーバー上でSeleniumを実行してスクレイピングを行いたいという依頼をうけて、レンタルサーバー上にPythonとSeleniumでのスクレイピング環...
Python

【Python】VPSサーバーでSelenium+GoogleChromeのスクレイピング環境を構築した時に遭遇したエラーまとめ

centOS8でChromeDriverのエラーと戦い、解決したのでまとめていきます。 動作環境 さくらのVPS CentOS8 Python 3.8.3 記事の内容 Chr...
タイトルとURLをコピーしました