元大学院生のノート

心と口と行いと研究で

2018-01-01から1年間の記事一覧

12/17 研究室訪問

研究分野を変えるか悩んでいたのでここ最近で原子核系の研究室を2つ訪問した。 一つはゼミや実験で何回かお世話になった先生の研究室。 2時間近く話した割にはあまり雰囲気がつかめず、Drが引きこもりになったという話も聞いてしまいここはやめておこうかな……

9/2 UnicodeDecodeErrorその3

pythonスククロp74lxmlでスクレイピングするときはopen()を使わなかったので, UnicodeDecodeErrorが出なかったが, BeautifulSoupでは, with open('index.html', encoding = 'utf-8') as f: soup = BeautifulSoup(f, 'html.parser') のようにopen()を使ってht…

8/24 UnicodeDecodeErrorその2

Pythonクロ&スクp49htmlを開いて中身を変数htmlに保存しようとしたところ, read()の箇所で, UnicodeDecodeError: 'cp932' codec can't decode byte 0x8d in position 147: illegal multibyte sequence が出たので, open()のエンコーディングを指定したとこ…

8/18 UnicodeEncodeError

Pythonクロ&スクp45エンコーディングを取得してutf-8にデコードしたものをhtmlファイルに保存しようとしたら, UnicodeEncodeError: 'cp932' codec can't encode character '\xa9' in position 37940: illegal multibyte sequence とprint()の箇所でエラーを…

8/17 urllibによるWebページの取得

Pythonクロ&スク p43urllibを使ってWebページを取得しようとしたら, アクセス拒否をされて403が出た.対処はUser-Agentを偽造することでアクセスできた. >>> import urllib.request >>> >>> request = urllib.request.Request("https://gihyo.jp/dp", header…