Python 【案件紹介】求人サイトの情報をPythonでスクレイピングしてCSVに書き出す
今回MENTAの案件で求人サイトをスクレイピングしましたので、その内容についてざっくりとにはなりますがご紹介したいと思います。
対象サイト
今回スクレイピングした求人サイトは「しゅふJOB」(というサイトになりま...
ミナピ@データアナリスト
Python プログラミング 【Python】コインチェックのAPIから現在のビットコイン価格を取得する
コインチェックのAPIから現在のビットコイン価格を取得するサンプルコード
import datetime
import json
import urllib
url = '
res = urllib.request.u...
GAS(GoogleAppScript) 【GAS】doPost()でのエラーメッセージをロギングで確認する方法
問題
GASでLineBOTを作成したのですが、doPost()の中でエラーが起きて動かなくなりました。それでエラーの内容を確認しようと例外処理が起こった際にconsole.logでログ出力するように設定したのですが、doPo...
プログラミング ワードプレスの記事内からJavascriptを埋め込んでプログラムを実行する
ワードプレスの記事上からjavascriptのプログラムを実行しようと思ったのですが少し手間取ったのでメモしておきます
注意点まとめ
ルール1. script タグを div タグで囲む
...
Python 【Python】GoogleAnalytics(GA4)のログデータをAPI経由で取得する
以前グーグルアナリティクスのアクセスデータをPythonからGoogleAPI経由で取得したのですがアナリティクスがGA4に移行したことでGA4用にプログラムを改修する必要が出てきたので、その際に調べたコードをメモしておきます。同じ...
Python エラー「module ‘scipy.sparse’ has no attribute ‘coo_array’」の解決法
networkXでエラーが発生
以前作ったnetworkXを使った文字データから共起ネットワークを作成するプログラムを作成したのですが、久しぶりに実行すると以下のようなエラーが発生していました。
エラーメッセージ...
ITまとめ 新卒でインフラエンジニアに内定貰ったんやけど・・・
1 名無しさん 2022/01/14(金) 14:26:34.89 ID:FjxyjFp00 最初はサーバーの監視とかオペレーターに回されるらしいんやけどこれってどこでもそうなんか？ めっちゃつまらなそうなんやけど 2 名無しさん 202...
ITまとめ なんJ民「プログラミング楽しい！ネットワーク？あっ大丈夫っす…」
1 名無しさん 2022/01/12(水) 20:05:17.69 ID:lGezFSbs0 なぜなのか 2 名無しさん 2022/01/12(水) 20:05:57.02 ID:n9uygjXcd そら地味やし 個人じゃしょーもないNW...
Python 【Selenium】MicrosoftEdgeでログイン情報を保持してスクレイピングする
今回はEdgeでログイン情報を保存したプロファイルを維持したままpython+Seleniumでブラウザを起動する方法について調べたので、動作したプログラムをメモ代わりに保存しておきます
前準備
まず自分のPCの...
Flask Pymysqlで「pymysql.err.InterfaceError: (0, ”)」が起きた時の対処法
先日cloudsql上のMysqlにpymysql経由で接続するFlask製のWebアプリケーションを作成していた際に以下のようなエラーに遭遇しました
エラーメッセージ
pymysql.err.InterfaceEr...