import requests from bs4 import BeautifulSoup import re headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko", } def get_link(): url = "http://www.pref.osaka.lg.jp/iryo/osakakansensho/corona.html…

www.pref.hokkaido.lg.jp import requests from bs4 import BeautifulSoup url = "http://www.pref.hokkaido.lg.jp/hf/kth/kak/hasseijoukyou.htm" headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko", } …

imabari.hateblo.jp 3/10からExcelファイルに変更されました 感染症患者一覧表をスクレイピング No.1の重複をどうするかはわからない 3/11 h2→h3に変更されていたので修正 !pip install python-docx import requests from bs4 import BeautifulSoup import r…

!pip install python-docx スクレイピング 3/11 h2→h3に変更されていたので修正 import requests from bs4 import BeautifulSoup import re headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko", } def get…

!apt install poppler-utils poppler-data import requests from bs4 import BeautifulSoup from urllib.parse import urljoin import os import re headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko", }…

都道府県 github.com github.com その他 github.com github.com github.com github.com github.com qiita.com github.com github.com github.com

抽出部分を変更 "・患者(.+?)例、無症状病原体保有者(.+?)例。\n・(.+?)時点までに疑似症サーベイランスおよび積極的疫学調査に基づき、PCR検査については、計(.+?)人の検査を実施。\n・上記患者のうち入院中または入院予定(.+?)名、退院(.+?)名、死亡(.+?)…

imabari.hateblo.jp imabari.hateblo.jp imabari.hateblo.jp imabari.hateblo.jp imabari.hateblo.jp imabari.hateblo.jp imabari.hateblo.jp imabari.hateblo.jp

最新情報から５件分取得 記事内容と確認するため抽出前の情報も表示しています import requests from bs4 import BeautifulSoup import re impot time headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko",…

www.cdc.gov スクレイピング 3/1 合計、死亡者の欄が追加されたので変更 3/3 また表示方法が変更されてtotal項目がなくなった(-_-;) 3/4 陽性のみになった function myFunction() { // スクレイピング var html = UrlFetchApp.fetch('https://www.cdc.gov/co…

※現在は厚生労働省フォーマットが変更されているため対応していません 各都道府県の新型コロナまとめサイトのdata.jsonの作り方 imabari.hateblo.jp imabari.hateblo.jp ソース toyokeizai.net github.com 手順 Githubの全データをウェブサイトにアップ 「da…

note.com toyokeizai.net github.com

フォーム docs.google.com ＃ 回答スプレッドシート docs.google.com プログラム 最新の情報を抽出 !pip install japanmap import pandas as pd import datetime # 回答スプレッドシートのCSVをダウンロード df_tmp = pd.read_csv( "https://docs.google.com…

pip install jaconv プログラム import requests from bs4 import BeautifulSoup import re from urllib.parse import urljoin headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko", } def get_link(): url…

github.com 全体とエリア別を一緒にまとめにしました imabari.hateblo.jp imabari.hateblo.jp

こちらにまとめました imabari.hateblo.jp インストール !apt install ghostscript !pip install camelot-py[cv] ダウンロード !wget https://www.who.int/docs/default-source/coronaviruse/situation-reports/20200219-sitrep-30-covid-19.pdf プログラム …

Pythonだけで作成できるように変更 インストール pip install pdfminer.six pip install requests pip install beautifulsoup4 プログラム import datetime import os import re import urllib.parse import requests from bs4 import BeautifulSoup from pd…

imabari.hateblo.jp Pythonだけで抽出できるように変更しました 参考 oku.edu.mie-u.ac.jp 一番上の最新のPDFをダウンロード 8週目以降の1ページ右上部分から取得（座標指定） Colaboratory上で実行 2/13だけChinaのdeathsが取れない ※Colaboratory以外では…