暇つぶし2chat TECH - 暇つぶし2ch■コピペモード□スレを通常表示□オプションモード□このｽﾚｯﾄﾞのURL■項目テキスト365:デフォルトの名無しさん 20/08/02 18:41:50.96 HU2rRSvM.net seleniumを使っていると悪質botとみなしてアクセスブロックするサービスを使う増えてきていて、スクレイピングはいずれ廃れる技術。 366:デフォルトの名無しさん 20/08/02 19:07:24.40 rl9xr/mh.net seleniumとかは本物のブラウザを操作してアクセスしてるわけで、そんなん掻い潜る方法はいくらでもある。ただしrecapchaに類するパズル解かせて人間か判断するブロックはいかんともしがたいが… そこは一旦停止させて人間に入力させるようにするしかない 367:デフォルトの名無しさん 20/08/02 19:17:01.80 hOgQnHyE.net 株価のデータを引っ張ってくるにはどうするのがベストなの？ 368:デフォルトの名無しさん 20/08/02 19:30:46.42 hD/B3n6L.net pandas detareader使えよ 369:デフォルトの名無しさん 20/08/02 22:48:40 afjdMLlX.net 最初から、Ruby on Rails で、Selenium Webdriver が楽。 DB も付いてる Github Actions のCI のシステムテストで、 Capybara で、Headless Chrome を使うとか 次ページ最新レス表示レスジャンプ類似スレ一覧スレッドの検索話題のニュースおまかせリストオプションしおりを挟むスレッドに書込スレッドの一覧暇つぶし2ch