2019-01-01から1ヶ月間の記事一覧

uipath

できるUiPath 実践RPA作者: 清水理史,できるシリーズ編集部出版社/メーカー: インプレス発売日: 2019/02/07メディア: 単行本(ソフトカバー)この商品を含むブログを見る できるUiPath 実践RPA [ 清水 理史 ]ジャンル: 本・雑誌・コミック > PC・システム開…

i.river.go.jpからダムの貯水率を取得する

import re import requests from bs4 import BeautifulSoup dam_name = '早明浦ダム' url = 'http://i.river.go.jp/_-p01-_/p/ktm1801070/?mtm=10&swd=&prf=3601&twn=3601208&rvr=&den=2255200700004' # dam_name = '玉川ダム' # url = 'http://i.river.go.j…

ひとりslack

slackに移行

Pythonを使ってWebページから情報を取得する

kzmmtmt.pgw.jp Pythonで作ってみた import requests from bs4 import BeautifulSoup url = 'http://www.nogizaka46.com/' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko' } media = {'tv': 'テレビ',…

Python でスクレイピングした情報を Slack に通知

qiita.com qiita.com

スクレイピングのおけるCSSセレクタ基本

サンプル <div class="class" id="id"> <h1>タイトル</h1> <h2>サブタイトル</h2> <p value="abc">テスト</p> <p value="abc def">テスト</p> <p value="abc-def">テスト</p> <ul> <li>1</li> <li>2</li> <li>3</li> </ul> </div> 基本 書式 説明 サンプル * すべての要素 * 要素名 要素名の要素 div .クラス名 id属性をつけた要素 div.class #id名 id属性をつけた要素 div#id セレクタ同士の関係 書式 説明 サンプ…

保守性・可読性の高いPythonコードを実装するためにはどうすればよいか

jumpyoshim.hatenablog.com

excelの結合セルで縦結合のみ表示

from openpyxl import load_workbook wb = load_workbook(filename='XXXXXX.xlsx') for sheet in wb.sheetnames: print('-' * 20) print(sheet) ws = wb[sheet] for i in ws.merged_cells.ranges: if i.min_row != i.max_row: print(i)

seaborn

qiita.com qiita.com

Minecraft Nitendo Switch版

久しぶりに攻略本買った Minecraft Nintendo Switch版ジャンル: ソフトショップ: 楽天ブックス価格: 3,542円 Minecraft (マインクラフト) - Switch出版社/メーカー: 日本マイクロソフト発売日: 2018/06/21メディア: Video Gameこの商品を含むブログ (1件) を…

Pythonスクレイピングの基本と実践 データサイエンティストのためのWebデータ収集術

スクレイピングの基本を勉強するにはいいかも 今まで見た本の中で説明が長いのと表になっていないので見づらい book.impress.co.jp Pythonスクレイピングの基本と実践 データサイエンティストのためのWebデータ収集術 (impress top gear) [ Seppe vanden B…

camelotでPDFの表からEXCELにコマンド変換(CSV・XLSX)

PDF

Camelot: PDF Table Extraction for Humans — Camelot 0.8.2 documentation インストール Installation of dependencies — Camelot 0.8.2 documentation apt install python3-tk ghostscript pip install camelot-py[cv] # PATH追加 export PATH=$PATH:/home…

camelotでPDFの表からEXCELに変換(CSV・TSV・XLSX)

PDF

厚生労働省のブラック企業リストをTSV変換 imabari.hateblo.jp 前回tabulaのは失敗するのでcamelotで再挑戦 Camelot: PDF Table Extraction for Humans — Camelot 0.7.3 documentation 厚生労働省の長時間労働削減に向けた取り組みから www.mhlw.go.jp 労働…