2020-05-01から1ヶ月間の記事一覧

PythonでIMIコンポーネントツールの住所変換コンポーネントで変換

info.gbiz.go.jp インストール imabari.hateblo.jp こちらの住所を変換 www.oideya.gr.jp import json import pandas as pd import requests url = "http://localhost:8080" headers = {"Content-Type": "application/json"} base = {"@type": "場所型", "住…

IMIコンポーネントツール

info.gbiz.go.jp blog.geolonia.com github.com sudo apt install nodejs npm mkdir imi-enrichment-address cd imi-enrichment-address npm install https://info.gbiz.go.jp/tools/imi_tools/resource/imi-enrichment-address/imi-enrichment-address-2.0.…

富山県ステータス

import re import datetime import pathlib import pandas as pd import requests from bs4 import BeautifulSoup import jaconv def zen2han(s): result = float(jaconv.z2h(s.rstrip("人"), digit=True, ascii=True)) return result def str2date(s): y = …

Github dispatch

import json import requests url = "https://api.github.com/repos/imabari/kumamoto-covid19/dispatches" headers = {"Authorization": "token xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx", "Content-Type": "application/json"} json_data = json.dumps({…

セル結合

web-breeze.net

一橋大学 #経済学のための実践的データ分析

speakerdeck.com speakerdeck.com

INIAD Syllabusのスクレイピング

import requests from bs4 import BeautifulSoup url = "https://g-sys.toyo.ac.jp/syllabus/result" headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko", } payload = { "year": "2020", "course": "0", …

新型コロナウイルス可視化

qiita.com qiita.com qiita.com qiita.com qiita.com qiita.com

新型コロナウイルスの表をtesseractでスクレイピング

binary-star.net code-graffiti.com blog.machine-powers.net qiita.com ni4muraano.hatenablog.com 京都府 www.pref.kyoto.jp 愛知県 www.pref.aichi.jp 最後のその他の陽性者の状況の表だけが順番がずれるので取れない テスト 日付 京都 愛知 5/10 ○ ○ 5/1…

前処理

qiita.com

youtu.be

Googleデータポータル

qiita.com

GitHub Actions で手動トリガーのワークフローを作る

qiita.com github.com personal access token Settings / Developer settings / Personal access tokens public_repo をチェック workflows on: repository_dispatch: types: [on-demand-test] schedule: - cron: '0 12 * * *' command curl --request POST …

PDF変換・住所

github.com qiita.com qiita.com

オンライン診療対応医療機関のPDFをCSVに変換

www.mhlw.go.jp import requests from bs4 import BeautifulSoup from urllib.parse import urljoin import camelot import pandas as pd url = "https://www.mhlw.go.jp/stf/seisakunitsuite/bunya/kenkou_iryou/iryou/rinsyo/index_00014.html" headers = …

feed43でオンライン診療対応医療機関リストの情報更新をRSS

オンライン診療対応医療機関リストの情報更新をRSSなし、Googleスプレッドシートだけで確認できるようにしてみた dev.classmethod.jp Global Search Pattern (optional)を使えばいい <ul class="m-listLink--hCol2">{%}</ul> <li><a href="{%}">{%}</a></li> 北海道・東北・関東地方 feed43.com 中部・近畿地方 feed43.com …