Python + scrapyで画像集め
Python + scrapyで画像集めできるようにプログラムを組んでいたが、何か取れない画像があった。。
設定は初期状態のままだったのでROBOTSTXTテキストに従う場合、制限があったようだ。
っていうことで望ましくないが
1 |
ROBOTSTXT_OBEY = False |
で取れた。
Python + scrapyで画像集めできるようにプログラムを組んでいたが、何か取れない画像があった。。
設定は初期状態のままだったのでROBOTSTXTテキストに従う場合、制限があったようだ。
っていうことで望ましくないが
1 |
ROBOTSTXT_OBEY = False |
で取れた。
Copyright (C) 2021 ITトラブル支援 All Rights Reserved.