今治市の避難準備情報、避難勧告、避難指示情報と避難所情報をスクレイピング

from urllib.parse import urljoin from urllib.request import urlopen from bs4 import BeautifulSoup def put_refuge(url): html = urlopen(url).read() soup = BeautifulSoup(html, 'html.parser') print(soup.select_one('#main_container > h1, h3').g…

玉川ダムの貯水率をスクレイピング

from urllib.request import urlopen from bs4 import BeautifulSoup import datetime import csv # GRP = USR004:玉川ダム、USR005:台ダム grp = 'USR004' # KTM = 1:1時間毎、2:30分毎、3:10分毎 ktm = 1 # 現在の時刻の5分前を取得 now = datetime.datet…

PDFの表をテキスト変換

tabula ブラウザ用 tabula.technology 範囲をぎりぎりにしてると文字が漏れるようなので大きめに選択 ページが多いとリピートで以降のページも選べるがときどき選択されないページがあるので一旦最終頁までスクロールしてから選択すると失敗しにくい。 ※ ペ…

PDFminer.sixでテキストが取得できない

Pythonクローリング&スクレイピング ―データ収集・解析のための実践開発ガイド― サポートページ:Pythonクローリング&スクレイピング ―データ収集・解析のための実践開発ガイド―:|技術評論社 5-8_pdf\print_pdf_textboxes.pyのサンプルコードを試してい…

厚生労働省のブラック企業リストをTSV変換

a244.hateblo.jp tabulaでブラウザで範囲を指定してPDFからTSV変換できます。 tabula.technology コマンド用 github.com tabula-1.0.1-jar-with-dependencies.jarをダウンロードして java -jar .\tabula-1.0.1-jar-with-dependencies.jar -o 170510-01.csv -…

スプラトゥーン2

imabari.hateblo.jp 7/21 バッグとコントローラーは届いた 7/22 本体が届くみたい www.nintendo.co.jp アカウントは作成済みだけどSwitchがないので先に進めない www.ikaclo.jp 有線LANも購入済み ロジテック 有線LANアダプタ Nintendo Switch 動作確認済 US…

auの新プラン

www.au.com auの新プランって割引した金額から1000円引きが適正価格だよな ランクが来たら通知確認があって次まで使えるならいいけど入る価値ないよな。 アップグレードプログラムEXの設定みると機種代金の半額以下が仕入れ価格で +1万円払って2年と2ヵ月後…

ルンバ購入

iRobot Roomba 自動掃除機 ルンバ 870 ピューターグレー 【日本仕様正規品】 + 専用ダストカットフィルター 2個付メディア: セット買いこの商品を含むブログを見る

レオマワールド

www.newreomaworld.com 移動 JR 大人 小人 合計 今治 8,870 5,380 14,250 http://www.jr-shikoku.co.jp/03_news/press/2017%2006%2019.pdf ※平成29年7月22日(土) ~ 平成29年8月31日(木) 大人 小人 合計 今治 4,780 2,380 7,160 レンタカー rent.toyota.co…

スクレイピング

vaaaaaanquish.hatenablog.com

Windowsでパッケージ管理システム

cartman0.hatenablog.com www.atmarkit.co.jp Powershellを管理者として実行 Windows10以外は以下をインストール Windows Management Framework 5.1 Download Windows Management Framework 5.1 from Official Microsoft Download Center スクリプトの実行ポ…

WindowsでHeadless Chromeでスクレイピング

qiita.com sites.google.com オプション入れてるけどバージョン59だと画面が表示される60で直るみたい # --- coding: utf-8 --- """ えひめ医療情報ネットの今治市地区の当番医案内から医療機関のリストを取得 """ import csv import re from selenium impor…

AWS Lambda python3 スクレイピング

qiita.com dev.classmethod.jp dev.classmethod.jp www.mediaplex.co.jp kiito.hatenablog.com kiito.hatenablog.com

Bash on Ubuntu on Windows

Hyper-Vのubuntuがアップデートとかするとすぐ起動時にエラーで動かないので Bash on Ubuntu on Windowsをインストール www.buildinsider.net 設定-更新とセキュリティ-開発者向け Powershellを管理者モードで起動 Enable-WindowsOptionalFeature -Online -F…

Cloud9でPython3・Beautifulsoup4・Selenium・Phantomjsでスクレイピング

c9.io git clone https://xxx@bitbucket.org/xxx/imabari119.git cd imabari119 echo "# My project's README" >> README.md git add README.md git commit -m "Initial commit" git push -u origin master Python3設定 Edit-Code Formatting-Open Language …

Nintendo Switch スプラトゥーン2セット

【Amazon.co.jp限定】【液晶保護フィルムEX付き(任天堂ライセンス商品)】Nintendo Switch スプラトゥーン2セット+ARMS[オンラインコード:ソフトはメールで配信] +オリジナルメタルチャーム3種(ガール・ボーイ・イカ(連結可能))出版社/メーカー: 任天堂発売日…

Python(3.6)のテキスト

http://qiita.com/KatsunoriNakamura/items/b465b0cf05b1b7fd4975

Inspiron 7567にWindows10 Creaters updateをクリーンインストール

imabari.hateblo.jp 前回同様M.2 SSDとHDDが接続しているとMediaCreationToolで作成したWindows10 Creaters updateのUSBディスクでもHDDしか認識しないためインストールできなかった。 以下の方法でできるようになります。 DellのリカバリイメージでUSB作成 …

Windows10 update

Windows 10 のダウンロード

auのIMAPのパスワードを取得

ottan.xyz メール設定 「#5000」宛に本文が「1234」のSMS(Cメール) アドレスが届くのでパソコンにメール転送 www.atmarkit.co.jp ※IPチェックだけならこれでも行けるはず auのスマホでテザリングでパソコンからアクセス chromeのデベロッパーツール(開発…

g07+

fleaz-mobile.com ついにau(3G)とdocomo(LTE)のDSDSができるみたいなので 家と職場の2台持ち解消できるので評価見てから考える。 でもauのEメールは受信できそうにないからどうするか simseller.goo.ne.jp 2枚のSIMを同時に使うことができます。通話に…

Inspiron 7567にHyper-VでUbuntu16.04

Inspiron 7567にVirtualBoxでUbuntu16.04をインストールしていたのですが しばらくしてアップデートをするとエラーで止まるこれで3回目なので VirtualBoxからHyper-Vに変更したスピードはすごい早いが フォントが荒いのとクリップボードから貼り付けができな…

Ubuntu16.04にvscodeをインストール

code.visualstudio.com curl https://packages.microsoft.com/keys/microsoft.asc | gpg --dearmor > microsoft.gpg sudo mv microsoft.gpg /etc/apt/trusted.gpg.d/microsoft.gpg sudo sh -c 'echo "deb [arch=amd64] http://packages.microsoft.com/repos/…

PUSHBULLETでパソコン起動を通知

知り合いの高齢者なんだけどパソコンをつけたら通知がくるように何かないかなと探していたらPUSHBULLETで通知するのが簡単そうでいいなと思ってテスト中 gihyo.jp qiita.com nano push.sh #!/bin/bash CURL=/usr/bin/curl PUSHBULLET_TOKEN= LANG=ja_JP.utf8…

Inspiron 7567でnasneの録画が見れない

nasneで録画したものをPC TV Plusで見ているのですが TVは見れるのに録画したものは音声だけで 「ネットワークの速度が低下しています」と表示されて しばらくしたら止まるという症状だったのですが PC TV Plusを右クリック、グラフィックプロセッサと共に実…

XPマシンにLinux Mintをインストール

知り合いのXPマシンにLinux Mintを入れる 前にLinux Mint Debianを入れていたがサポートが切れたみたいでアップデートも止まり、 囲碁のゲームも動かなくなったので再インストール Linux Mintを入れたがDVDが認識しない Debianを入れたが囲碁が動かないので…

Dell ゲーミングノートパソコン Inspiron 7567 メモリ・SSD交換

裏のパネルをオープン 電源ケーブルを外してメモリ16GB×2とM.2 SSDを刺す。 一度HDDから起動確認してから起動時にF12連打してMediaCreationToolで作成したUSBをUEFIで起動し再インストール開始 【 Windows 10 】 OS再インストール手順 - Microsoft OSメディ…

Xperia

sony adb driver http://developer.sonymobile.com/downloads/drivers/ adb download https://developer.android.com/studio/releases/platform-tools.html

eeepcにCloudReadyをインストール

gigazine.net neverware.com インターネットにしか使わないのでかなり快適になった Windows7が動いてたパソコンだと快適やと思う。 2007年以降のパソコンだとVista以降なのでたいてい動くはず サポートデバイス Supported Devices | Neverware Install Guide…

イオンモバイル・OCN モバイル ONE・mineo・楽天モバイル

データ専用・バーストあり・低速制限がない条件の場合 イオンモバイル(タイプ2)・OCN モバイル ONE・mineoの3つ ※ nuroモバイルは低速制限がわからない 基本、楽天が安い、OCNは楽天+1GBで少し高い 500MB~4GBまではイオン 40GB以上はイオンしかない OCN…