14/07/15 14:24:24.83 S8siseTj0.net
一般ユーザーと同じ情報だけを取得するクローラーを
技術的にどうやって弾くのかまったく想像できん。
IPやプロバイダで弾いたところで即対応してくるだろうし.
199:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:26:33.32 YYkXOhh30.net
>>197
そりゃID:d9uEJnb50はクロールの可否で一喜一憂せんといかん立場だからやろ
200:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:27:56.16 mfG/AueX0.net
なんてこったぁ!
201:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:27:59.10 d9uEJnb50.net
>>197
CMが敗北宣言して信者がその玉音を聞いて涙する様を見たい
202:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:31:08.64 kgZ7ib6h0.net
>>201
それじゃただ単に止まってることが都合悪いだけだろそれ
203:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:33:44.89 V6oMTon30.net
CMの敗北宣言が楽しみにするような奴は向こうに住んじゃえよ
204:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:33:54.17 YYkXOhh30.net
>>202
向こうは生活かかってるんだからそう理屈で追いこんだるなや
205:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:34:39.87 B5pYuP9w0.net
一般ユーザーのクロールは単純にディレクトリの名前の昇順に
順番に取得するため、すべて取得するのに時間がかかるし、そのため
クロール実行が数時間おきとかになる
一方ひろゆきやログ速のクロールは5分おきとか短時間で全情報取得が必要のため
同時に何本ものクロールが動く(あるいは数秒遅れて複数動く)とか
ディレクトリの1番目、11番目、21番目・・・からクロールされるとか規則性があって
それを見つめるプログラムを2ちゃん側で常駐して見つけ次第塞ぐとかするのかな
それゆえにこららのクロールは2ちゃん鯖に負荷かけてるんだが
206:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:34:53.44 d9uEJnb50.net
>>202
別に都合も何もねえわ
西村嫌いだがJIM側にもついてないからな
207:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:37:14.56 r31tfqQ+0.net
嫌儲2時以降のレスが反映されてないなw
208:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:37:26.29 kgZ7ib6h0.net
>>206
「CMが敗北宣言して信者がその玉音を聞いて涙する様を見たい」
ってのはお前の目的なら止まってることは都合が悪いことだろ
209:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:39:17.22 d9uEJnb50.net
>>208
俺はお前らが嫌いなんだ
210:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:40:10.64 4RpoCu9P0.net
あっちこっちで同じような事書いてるとヒットマーク呼ばわりされるぞ
211:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:41:13.72 mdVbrB/p0.net
頑張れ!頑張れ!コ!ド!モ!ン!
やーまだたーろおー♪
212:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:44:35.03 i4DXbwkn0.net
>>195
SCに反映するのに5~10分かかるみたいだ
213:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 14:45:34.17 Cu0yqVHc0.net
>>205
完璧な遮断は難しそうだな
部分的にでも欠損させていけば十分か
214:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 16:38:40.37 mLI6x2MS0.net
山'`´‘火ソ
ノ____ l
l | ⌒ ⌒ | ミ
ヾ丿 ・ ・ | ミ
l,l ∪ l,l >>1は無能ナリ
ヽ ー― /
/ヽ___/\
215:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 17:18:58.61 DGQtmMBU0.net
クロールは止まってない
これが現実wwwwww
216:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 17:27:28.02 Lce5Ce+v0.net
また負けたのか
217:番組の途中ですがアフィサイトへの\(^o^)/です
14/07/15 17:33:57.22 antdwu0/i.net
Anti
Crawl
System
かっこいい
218:過去ログ ★
[過去ログ]
■ このスレッドは過去ログ倉庫に格納されています