自動巡回ソフトを作りたい。at TECH
自動巡回ソフトを作りたい。 - 暇つぶし2ch263:デフォルトの名無しさん
04/06/07 03:07
ここの1漏れのドッペルゲンガーみたいだ。
Cと巡回、腕がないところまでまで被ってやがる ('A`)

264:デフォルトの名無しさん
04/06/07 12:52
>>263
ではお前が後を継げ。

265:デフォルトの名無しさん
04/06/10 05:55
             ノニ,ニ,ニi
          ,ゝ-〔ヅ,ニニニi
         (.(~/´ ̄`ヽ
          | || __.|
          | || |㌍㌢||
          | || |㌔㌧||
          | || |( ゚Д゚) < 深夜に浮上します
         匚;|_(ノ_____|つ◎、
         .!-!|_i_i_i_i_i_|
         .|;|  しiノ
シュゴゴゴ・・・  | i|
       ,;:"⌒ ⌒゙;,.
      .,(,,,,''''   ;;;;,,),.
     .,;(''' ,;:,,,  ;;;;;;  ,,),..




266:デフォルトの名無しさん
04/06/10 12:35
指定したURLをダウンロードしないでIEコンポーネント
のブラウザーで串を変えながらただ巡回するソフト作って。

中国の鯖借りているんだけどアクセス数が少ないと垢
削除されてしまうので誰かよろしく
1000円くらいならシェアでもok

267:デフォルトの名無しさん
04/07/31 21:20
#include <stdio.h>
#include <sys/types.h>
#include <sys/socket.h>
#include <netinet/in.h>

int main(int argc, char *argv[])
{
int fd;
struct sockaddr_in addr;
if ((fd = socket(PF_INET, SOCK_STREAM, 0)) < 0) {
perror("ソケット生成失敗");
exit(1);
}
bzero((void *)&addr, sizeof(addr));
addr.sin_family = PF_INET;
addr.sin_port = htons(80);
addr.sin_addr.s_addr = inet_addr(argv[1]);
if (connect(fd, (struct sockaddr *)&addr, sizeof(addr)) < 0) {
perror("接続失敗");
exit(1);
}
printf("接続できました");
close(fd);
return 0;
}

繋がったぁぁぁぁ!!
>>1じゃないけど。



268:デフォルトの名無しさん
04/08/12 02:45
age

269:デフォルトの名無しさん
04/09/22 03:15:12
釣りなのはわかってるんだが

270:デフォルトの名無しさん
04/11/01 23:59:59
俺が1の後を継ぎます

271: 【だん吉】 【1773円】
05/01/01 08:52:06
あげ

272:Delフサギコ ◆A6VzDeLphI
05/01/06 00:55:27
 ∫,,,,,,,,,∧,,∧  こばんわ。
⊂,,,,,,,,,つ,,゚Д゚ミつ

この手のソフトって、
どれをお手本に考えておけばいいのかな?

Permanサーファー?

GetHTMLWや
regu035dや
webget
はかなり使ってみたんだが
どれもUI的にはなんとはなしにイマイチで
設定も面倒で、自分でも使いにくいし
人にお勧めするのもちょと微妙。

それぞれの使い勝手などで
使いにくいところ、使いやすいところを
吟味していく作業がかなり必要なんじゃないかと
思うんだけど....



それとも、こういう感じのソフトを求めているのではないのかな?


273:宿題だすから力貸し手とうお願い
05/02/02 05:58:44
2番煎じな(藁
2ch1ゲッター。
ニュース系板やお好み板の2までを自動収集する。
perl wget diff gerp あたりで頑張ったんだがあぼーん
したんで優秀なお前ら等力貸し手

LWPでリンク拾うときスレリンク先一覧を取る
~m/<a href=\"(http:.*?)\"/g

URIを
スレリンク(tech板)

スレリンク(tech板:-2番)
こう-2にしたいんだが


でwgetしてとかこの出力を書き出して
diffしてからgerpしてしてwgetとか考えたんだが
うまくいかん。あと、-O 2ch.htmlとかしてもindexない
なんかスマートにカコ良く仕上げたいんだが。

web錆すは使ってるんだがそれでいいだろ
終了としないでくれるとありがたいす。


274:1
05/03/10 07:52:42
イヤー、まだまだ時間がかかりそうです。

275:デフォルトの名無しさん
皇紀2665/04/01(金) 00:30:58
あげ

276:デフォルトの名無しさん
05/06/29 21:47:46
誕生日age

277:デフォルトの名無しさん
05/07/05 01:14:17
サゲ

278:デフォルトの名無しさん
05/07/06 18:40:25
wsh でつくるのが簡単だな

279:デフォルトの名無しさん
05/09/27 02:13:28
元気ですかーーーっ!!
漏れら極悪非道のagoブラザーズ!
今日もネタもないのにagoてやるからな!ンムフフ
 ̄ ̄∨ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄
    __      __
  / ,,,..,ヽ、  / ,,,..,ヽ、
  / シ 、 _ジ . / シ 、 _ジ
  ミぃ ´.Jソ   ミぃ ´.Jソ   ago
  /.、´ー(∩∩ .、´ー(    ago
 (つ\ _ノ  (  \⊂) ago
 ( ヽノ    ヽ/  )   ago
 し(_)    (_)J




280:デフォルトの名無しさん
05/10/27 14:17:04


281:デフォルトの名無しさん
05/11/12 14:02:34


282:デフォルトの名無しさん
05/11/26 03:08:43


283:デフォルトの名無しさん
05/12/19 04:26:36


284:デフォルトの名無しさん
06/01/06 23:32:30


285:デフォルトの名無しさん
06/02/24 16:45:03


286:デフォルトの名無しさん
06/03/25 00:28:22
いわゆるクローラだよね。
クロールして集めて来た結果をMySQLとかにぶち込んでみると、何か出来そうに思う。
簡単な所ではRSSリーダ?

287:デフォルトの名無しさん
06/05/14 20:58:32
1は何処行った?

288:デフォルトの名無しさん
06/05/14 23:41:03
さっき見かけた時にはもう寝てたよ。

289:デフォルトの名無しさん
06/07/02 11:41:50


290:デフォルトの名無しさん
06/09/11 18:44:21
172はどこいった?

291:デフォルトの名無しさん
06/09/16 08:31:39
>>244 ノシ


292:デフォルトの名無しさん
06/09/25 16:32:59
永続的にバックで走りつづけるクローラを普通に作ったら重すぎるので
なにがしかの見地を得ようとここを見てみたが、その方面の活動は存在しないのね。

293:デフォルトの名無しさん
06/10/01 14:23:50
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

294:デフォルトの名無しさん
06/10/01 14:23:53
もうこうなったら・・・同意するしかない!!!!
スレリンク(cheerleading板)l50

どう見ても清純なチアリーダーの仕業です。本当にありがとうございました。


295:デフォルトの名無しさん
06/10/01 14:23:55
さりげなく同意しに行こうぜwwwwwwwwwwwwwww
スレリンク(news4vip板)l50

どう見てもVIPの仕業です本当にありがとうございました

296:デフォルトの名無しさん
06/10/01 14:23:55
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

297:デフォルトの名無しさん
06/10/01 14:24:00
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

298:デフォルトの名無しさん
06/10/01 14:24:01
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

299:デフォルトの名無しさん
06/10/01 14:24:06
もうこうなったら・・・同意するしかない!!!!
スレリンク(cheerleading板)l50

どう見ても清純なチアリーダーの仕業です。本当にありがとうございました。

300:デフォルトの名無しさん
06/10/01 14:24:06
もうこうなったら・・・同意するしかない!!!!
スレリンク(cheerleading板)l50

どう見ても清純なチアリーダーの仕業です。本当にありがとうございました。

301:デフォルトの名無しさん
06/10/01 14:24:07
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

302:デフォルトの名無しさん
06/10/01 14:24:07
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました



303:デフォルトの名無しさん
06/10/01 14:24:07
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

304:デフォルトの名無しさん
06/10/01 14:24:14
さりげなく同意しに行こうぜwwwwwwwwwwwwwww
スレリンク(news4vip板)l50

どう見てもVIPの仕業です。本当にありがとうございました

820 :以下、名無しにかわりましてVIPがお送りします :2006/10/01(日) 14:21:05.63 ID:9TxrA6pl0

↓これを貼りまくろうぜ

他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

305:デフォルトの名無しさん
06/10/01 14:24:15
それについては同意ヌルポ

306:デフォルトの名無しさん
06/10/01 14:24:15
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

307:デフォルトの名無しさん
06/10/01 14:24:20
科学の力で他板に同意しに行く
スレリンク(bake板)l50

化学板の仕業でした。ごめんね。

308:デフォルトの名無しさん
06/10/01 14:24:22
これを貼りまくれ!

他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

309:デフォルトの名無しさん
06/10/01 14:24:26
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

310:デフォルトの名無しさん
06/10/01 14:24:35
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

311:デフォルトの名無しさん
06/10/01 14:24:38
これを貼りまくれ!

他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました


312:デフォルトの名無しさん
06/10/01 14:24:38
もうこうなったら・・・同意するしかない!!!!
スレリンク(cheerleading板)l50

どう見ても清純なチアリーダーの仕業です。本当にありがとうございました。

313:デフォルトの名無しさん
06/10/01 14:24:47
科学の力で他板に同意しに行く
スレリンク(bake板)l50

化学板の仕業でした。ごめんね。

314:デフォルトの名無しさん
06/10/01 14:24:50
同意

315:デフォルトの名無しさん
06/10/01 14:25:01
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

316:デフォルトの名無しさん
06/10/01 14:25:06
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

317:デフォルトの名無しさん
06/10/01 14:25:05
♪プ・リ・キュ・ア♪
| スパスパスパーク
|   Splash☆Star~♪
|   ∧∧       ∧∧   クルクルミラクル
| ヾ(゚∀゚)ノ    ≡ (゚∀゚ )Splash☆Star~♪
|   (  )   ≡ ~( ~)
|  /< <    ≡  ノ ノ
./ フタリハフタリハ プリキュア~♪
      ∧∧∧∧
     (゚∀゚≡゚∀゚)
       (∩∩)

318:デフォルトの名無しさん
06/10/01 14:26:17
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました


319:デフォルトの名無しさん
06/10/01 14:27:13
他板に、さりげなく同意しにいこうぜ
スレリンク(entrance板)

どう見てもラウンジの仕業です本当にありがとうございました

320:デフォルトの名無しさん
06/10/01 14:45:23
       以上、ユダとラウンコの馬鹿どもの仕業でした

    m n _∩                   ∩_ n m
  ⊂二⌒ __)    /\___/ヽ       ( _⌒二⊃
     \ \   /''''''   '''''':::::::\     / /
       \ \  |(●),   、(●)、.:|  / /
        \ \|   ,,ノ(、_, )ヽ、,, .::::|/  /
          \ .|   ´トェェェイ` .:::::::|  /    それが、ラウンコ精神
           \\  |,r-r-| .::::://     URLリンク(etc3.2ch.net)
             \`ー`ニニ´‐―´/         
             / ・    ・ /  

321:デフォルトの名無しさん
06/10/01 14:50:14
すいませんでした。
議論を再開してください。

322:デフォルトの名無しさん
06/10/08 00:06:55
C#でIEコンポーネント使って巡回ソフトじゃないんだけど
MSDNのHTML化ソフトを作りました。
1時間くらいあれば誰でも作れる程度のものですけど。
ブラウザに表示したものを取り込むので巡回ソフトには
まったく不向きですけど、表示したページからリンクされているページを
リストするようなことは簡単に出来ました。
こういうちょっとした小物を作るのにはC#って便利だと思いました。
僕の場合は、ヘルプファイルをIEにコンバートさせる必要があったので
表示させたものを取り込むという方法を取りましたが、
WEBページを取り込むだけならその必要もないので、
C#でごく簡単に実用的な巡回ソフトが作れると思います。
参考まで。

323:デフォルトの名無しさん
06/10/08 00:42:03
C
M

1








W
C


324:デフォルトの名無しさん
06/10/15 20:53:19
自動巡回ソフト作成にチャレンジしているが
C#のAxWebBrowserとWebBrowserの違いが
未だに分からない漏れ…

AxWebBrowserは追加しないと使えない奴で、
WebBrowserはC#2005から標準で付いているやつって
解釈でよろしいのですか?

似てるけど若干違うみたいなので、
MSDNのサンプルが動かなかったりするのが
初心者にはワケワカメで困ります。

325:デフォルトの名無しさん
06/11/18 00:21:18
ほしゅ

326:デフォルトの名無しさん
06/11/20 07:16:25
関連してると思うのでリンクはっておきます

非RSSな何か。その2
スレリンク(software板)

327:デフォルトの名無しさん
06/12/09 21:05:23
自動巡回もここまで来たNe!
近日公開だってさ。

自動懸賞サイト巡回&自動応募ソフト

゚Д゚)またウマウマか!
※URLは張れないからYahoo検索で。

328:デフォルトの名無しさん
06/12/10 11:04:31
C++なんて使いにくくて嫌だ。

329:デフォルトの名無しさん
06/12/11 22:13:13
キタ━━━(゚∀゚)━━━ !!

330:デフォルトの名無しさん
06/12/11 22:43:32
( ´ρ`) ウマウマ

331:デフォルトの名無しさん
06/12/12 05:16:35
このスレまだあったんだ・・・

332:デフォルトの名無しさん
06/12/12 14:27:48
完成はいつ?

333:デフォルトの名無しさん
06/12/14 03:19:11
ベクターに出てるね。うまうま
URLリンク(www.vector.co.jp)


334:デフォルトの名無しさん
06/12/15 10:34:29
Linux で Web スパイダーをビルドする
URLリンク(www-06.ibm.com)


335:デフォルトの名無しさん
07/01/22 13:44:26
このスレも長いね

336:デフォルトの名無しさん
07/01/22 18:21:36
自動巡回で板内の一番古いスレを探してくるプログラムはありますか?


337:デフォルトの名無しさん
07/01/23 23:54:51
sinceでソートすればいいんじゃないの

338:デフォルトの名無しさん
07/02/11 09:11:33
あるサイトにカスタマイズしたブッコ抜きツールを作っていたら、
そのサイトが閉鎖しちゃった(泣)

339:デフォルトの名無しさん
07/02/15 05:59:22
sage

340:デフォルトの名無しさん
07/04/26 00:23:56
           ∧_∧
          ( ´ー`)
         /´,mn   `ヽ
         〈 (_n ̄)ィ   〉
         ヽ_(y';、,!,/  ノ
     メキメキメキ   |ヽ、__/〈
          /|  !,   ヽ
         〈 |   |`ヽ、 `i,
          ヽ/   ノ   i  ,〉
          ノ  ,./ヽ   |   |
     /^ヽ_/  ヽ、 )   i  ,!
     し/´ ∧_∧/⌒'i (  ヽ、
      ゝ (.;´Д`),ノi ノ ←>>1
      /  ノ  ,r-っ (ノヽ,,>
     〈_ ̄ ̄ メ  ))
        ̄ ̄`ヽ`つ て バンバン
          )/V Vヽ(




341:デフォルトの名無しさん
07/06/23 12:09:26
sage

342:デフォルトの名無しさん
07/06/24 09:18:31
自動巡回のリンク抽出の方法について書きます。
簡単な方法としてTidyLibを使う方法があります。

1.TidyLibを使ってHTMLをXHTMLに変換します。
2.XHTMLをSAXを使ってXMLとして処理していきます。
3.Aタグが来たときにVectorなどにリンクを追加していきます。
この時、タグ内の文字列を解析するとリンク先の内容をある程度吟味することができます。

この方法は正規表現を駆使するより高速で簡単です。

343:デフォルトの名無しさん
07/08/16 09:57:29
age

344:デフォルトの名無しさん
07/08/17 00:58:23
       ,.ィ , - 、._     、
.      ,イ/ l/       ̄ ̄`ヽ!__
     ト/ |' {              `ヽ.            ,ヘ
    N│ ヽ. `                 ヽ         /ヽ /  ∨
   N.ヽ.ヽ、            ,        }    l\/  `′
.  ヽヽ.\         ,.ィイハ       |   _| 俺は今とんでもない事に
   ヾニー __ _ -=_彡ソノ u_\ヽ、   |  \ 気付いた ソフトバンク
.      ゙̄r=<‐モミ、ニr;==ェ;ュ<_ゞ-=7´ヽ   >  並べ替えると ,馬糞と糞
.       l    ̄リーh ` ー‐‐' l‐''´冫)'./ ∠__ ソフトバンクモバイルを並べ替えると,
       ゙iー- イ'__ ヽ、..___ノ   トr‐'    /    踏ん張ると糞も倍
       l   `___,.、     u ./│    /_これは偶然の一致か?
.        ヽ.  }z‐r--|     /  ト,        |  ,、 何者かの陰謀では ないのか?
           >、`ー-- '  ./  / |ヽ     l/ ヽ


345:デフォルトの名無しさん
07/09/17 02:03:05
SA5000

346:デフォルトの名無しさん
08/01/11 12:09:58
age

347:デフォルトの名無しさん
08/06/06 21:21:32
VMAX

348:デフォルトの名無しさん
08/06/11 14:31:59
(やりたい事によっては良いエサを吊るした方が…ゴメン)

349:デフォルトの名無しさん
08/07/26 09:30:59
age

350:デフォルトの名無しさん
09/01/31 20:56:05
7年前のスレなのか

351:マイク ◆gZ6OoOjBU6
09/02/05 07:22:27
俺も最近クローラ作って自動解析やらせたいと思っていた。

352:デフォルトの名無しさん
09/04/19 14:56:02
ダメ

353:デフォルトの名無しさん
09/05/30 01:06:11
UNNKOBURIBURI

354:デフォルトの名無しさん
09/10/05 04:14:53
>>1さん負けないで

355:デフォルトの名無しさん
09/12/11 10:34:32
このスレまだあるのかよw

356:一 五明 ◆l4DKXvv9Lw
10/01/03 12:17:16
このスレ立った時点でさえ02年かよ。
未だに使ってはいるんだけどねINCM。


最新レス表示
レスジャンプ
類似スレ一覧
スレッドの検索
話題のニュース
おまかせリスト
オプション
しおりを挟む
スレッドに書込
スレッドの一覧
暇つぶし2ch