02/01/20 01:42
>>1
GNU wget は、小規模なダウンロードなら問題ありませんが、
大規模ダウンロード (検索エンジン用ファイル収集)で使うと、
誤動作しまくりです。
とりあえず、プログラム作成することが目的であれば、
Active Perl をインストールして、
(1) LWP::UserAgent クラスで、HTMLファイルを取り寄せて、
(2) HTML::TreeBuilder クラスで、HTMLファイルをパース処理して
リンクを抽出
(3) 各リンクについて、(1)へループ処理
というのを書いては、いかがでしょうーか?