19/10/07 21:48:35.31 .net
>>579
> 感覚としては3~5連続で取ると出る、が出ないときは出ない
ベースとなる HTML だけでなく、個々のファイル単位ではどうでしょう。
HTML が保存できても、そこで使われている画像等を保存するために
副次的に発行される /save/ リクエストが Too Many Requests となってしまい、
結果としてそれらを取りこぼす、なんて事態が発生し始めたように思えます。
このエラーメッセージ、語順がちょっと変な上に文末のピリオドを忘れていて、
Internet Archive であまりこういう英文を見ることが無いので違和感がありますね。
URLﾘﾝｸ(o.5ch.net)
594:名無しさん＠お腹いっぱい。
19/10/08 11:06:26.40 .net
>>580
ごめん、個々のファイルまでは見てないから分からない
表示が出るようになったのは最近
語順に関しては、IAは割とそういう適当な所があるような気もするｗ
595:名無しさん＠お腹いっぱい。
19/10/08 15:56:29.37 .net
この語順そんな変か？
ピリオドがないのも、この手のエラーメッセージの場合はそこそこあると思うけどな
596:名無しさん＠お腹いっぱい。
19/10/09 19:13:13.16 .net
>>580
ということは、今後IAについても、
ウェブ魚拓に見られるような、
画像（写真など）の抜け落ちが出てきそうってこと？
何かそれも嫌だなあ
597:名無しさん＠お腹いっぱい。
19/10/09 19:41:48.03 .net
Twitterの埋め込みがきちんと保存されないのが個人的に一番困ってるんだけど、この現象って以前からなんだろうか
598:名無しさん＠お腹いっぱい。
19/10/10 20:49:37.09 .net
Save Page Nowの仕様変更をいくつか確認した
・web.archive.orgトップのSPNフォームで保存ボタンを押すと一旦/save/に誘導されるようになった
・/save/のオプションに「Save screen shot」が加わった
→有効にすると「/web/日付時刻数字/URLﾘﾝｸ(example.com)<))」の形式でスクショ画像が保存される
→Save outlinksとの併用も可能だがリンク先のスクショは取得してくれないっぽい
599:名無しさん＠お腹いっぱい。
19/10/10 21:05:30.27 .net
>>585
archive.todayみたいなアレか
600:名無しさん＠お腹いっぱい。
19/10/10 23:47:38.64 .net
スクショいいな
動的なサイトでも一応取れる
601:名無しさん＠お腹いっぱい。
19/10/11 01:21:38.88 .net
うちのローカルでレンダリングしたやつになるのか？
602:名無しさん＠お腹いっぱい。
19/10/11 11:15:07.84 .net
>>586
厳密にはちょっと違うかもしれない
Wayback Machineのスクリーンショット機能は単なる画像ファイルとして保存される
対してarchive.todayやウェブ魚拓は一応HTMLコンテンツとして保存するから、リンクなどは一応機能する
603:名無しさん＠お腹いっぱい。
19/10/11 11:25:19.46 .net
>>588
おそらく違う
User Agentをめちゃくちゃな文字列にした上で、上の方で出てたプロキシ確認サイトをスマホのFirefoxからアーカイブしてみた
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(taruo.net)
見れば分かるけど、使用したブラウザの情報がUAも含めて別の内容に置き換わってる
おそらくweb.archive.orgのサーバ側の情報なんだと思う
ヘッドレスブラウザか何かを使ってるのかも
604:名無しさん＠お腹いっぱい。
19/10/11 18:56:09.01 .net
どういうことなの
605:名無しさん＠お腹いっぱい。
19/10/11 19:25:43.75 .net
>>589
これは忘れてないよな、念のため。
URLﾘﾝｸ(o.5ch.net)
606:名無しさん＠お腹いっぱい。
19/10/11 19:54:20.66 .net
Too Many Requestsがマジで鬱陶しい
ほんとにニーズを分かって言ってんのか！？と言いたくなる
607:名無しさん＠お腹いっぱい。
19/10/11 20:58:38.55 .net
>>592
それは分かってるから大丈夫
でもInternet Archiveの方にはスクリーンショットと普通のアーカイブを簡単に切り替える機能がないっぽいからな
比較の対象にはならないような気もする
608:名無しさん＠お腹いっぱい。
19/10/12 01:10:01.25 .net
所詮IAはアメリカ人様の物で日本人の物ではない。そこはわきまえるべき。
日本でも公正利用の概念を法律化するしかない。
609:名無しさん＠お腹いっぱい。
19/10/12 09:22:47.74 .net
台風で軒並みあらゆる施設が臨時休業の最中だが、
うおーい、「Too Many Requests」に添付された文章が変わったぞ！
URLﾘﾝｸ(i.imgur.com)
Too Many Requests
We are limiting the number of URLs you can submit to be Archived to the Wayback Machine, using the Save Page Now features, to no more than 15 per minute.
If you submit more than that we will block Save Page Now requests from your IP number for one day.
Please feel free to write to us at info@archive.org if you have questions about this. Please include your IP address and any URLs in the email so we can provide you with better service.
610:名無しさん＠お腹いっぱい。
19/10/12 12:04:20.05 .net
な、なんだこれは…
URLﾘﾝｸ(i.imgur.com)
↓
URLﾘﾝｸ(i.imgur.com)
611:名無しさん＠お腹いっぱい。
19/10/12 17:50:17.15 .net
>>596
google翻訳
> リクエストが多すぎる
>
> [今すぐページを保存]機能を使用して、Wayback Machineにアーカイブするために送信できるURLの数を1分あたり15個以下に制限しています。
> それ以上送信すると、(あなたの)IPアドレスからのSave Page Nowリクエストが1日間ブロックされます。
>
> これについて質問がある場合は、info @ archive.orgまでお気軽にご連絡ください。 より良いサービスを提供できるように、メールにIPアドレスとURLを含めてください。
「(あなたの)」だけ俺が付け足した
612:名無しさん＠お腹いっぱい。
19/10/12 19:59:49.32 .net
各地域の避難情報を見れる自治体のURLがたまにしか見れないから
アーカイブ取って見ようと思ったがずっとbummer
613:名無しさん＠お腹いっぱい。
19/10/12 20:51:44 .net
bummerってなんなん
614:
19/10/12 22:53:46 .net
>>597
ベータ版としては割と前から実装されてたけど、つい数日前に正式版になった
色々オプションが付けられるようになったんよ
615:名無しさん＠お腹いっぱい。
19/10/13 00:29:42.05 .net
こういう時に魚拓が生きる
616:
19/10/13 12:38:24 .net
>>598
下手したらブロックもされるのか。
急いで大量に取るのも難しくなるんだな。困ったなあ。
>>602
確かにそうだが、1日辺り60回までだからな。
どこも慎重にやらないと駄目か。
617:
19/10/13 15:44:29 .net
InternetArchive側も限られた回線のリソースで全世界からのリクエストを受け付けないといけないんだから、多少のリミットは仕方ないよ
規模を考えると1分間に15個までならむしろ緩い方じゃないかな
618:名無しさん＠お腹いっぱい。
19/10/13 16:09:30.72 .net
今日100リンクほど一気にsaveしたけど20近くは一度に保存されるしブロックもされなかったけどな
HTTPリクエストに直後POSTしてる訳じゃないからかもしれないが
619:名無しさん＠お腹いっぱい。
19/10/13 18:07:36.01 .net
>>605
どういう風にsaveしたんよ
620:
19/10/13 21:28:38 .net
>>606
ユーザースクリプトでURLﾘﾝｸ(web.archive.org)とwindow.location.href結合してwindow.openしてるだけよ
621:名無しさん＠お腹いっぱい。
19/10/14 00:17:00.17 .net
一分15個か
覚えとこう
622:
19/10/14 04:18:41 .net
少ないように感じたけど、冷静に考えたら普通に十分だな
623:名無しさん＠お腹いっぱい。
19/10/14 10:42:20.01 .net
4秒に1個だから十分すぎるくらいだな
よほど大量のURLを数時間で処理したい場合ならもしかしたら足りないかもしれないけど、そんな状況はそうそうない
624:名無しさん＠お腹いっぱい。
19/10/14 10:59:14.84 .net
>>610
＞よほど大量のURLを数時間で処理したい場合ならもしかしたら
＞足りないかもしれないけど、
…正直言って自分はそれなんだよなあ。
だってデイリースポーツの公式なんて、ひとつのカテゴリーでも
記事を続々上乗せしていくものだから、トップが馬鹿みたいにコロコロ変わっていくのよ。
だから目を放した隙に、取りたかった状態と、魚拓の結果が異なることが本当に多い。
しかも同じように記事を上乗せしていくのを、中日スポーツも
やり始めたんで、非常に今困ってる。
スポニチや日刊みたいに、記事は追加してもトップはしばらく変えない
くらいがいいのだけど。
625:
19/10/14 14:14:29 .net
祝10000回
URLﾘﾝｸ(i.imgur.com)
626:名無しさん＠お腹いっぱい。
19/10/14 14:29:56.82 .net
>>611
目指すところがよく分からないから的外れなこと言ってるかもしれないが、
定期的に更新をチェックして、以前の状態と変更があったら/save/を投げるようなスクリプト組んだら？
627:611
19/10/15 02:14:16.40 .net
>>613
「的外れなこと言ってるかもしれない」ってのは
「定期的に更新をチェックして、以前の状態と変更があったら/save/を投げるようなスクリプト組んだら？」
というのがそちらにとっては的外れなコメントかもしれないって事ね
628:
19/10/15 13:03:29 .net
新機能のスクショ、以前取ったやつが消えてるんだけど反映が遅いだけかな？
629:名無しさん＠お腹いっぱい。
19/10/16 01:14:03.99 .net
通常時でも動作が不安定になることが少なくないから、新機能ということで余計に不安定さが増してるのかもな
念のために一応スクショを取得し直してみては
630:名無しさん＠お腹いっぱい。
19/10/16 07:28:29.61 .net
キャプチャ数からみて明らかに保存できてるのにまずHm.を返すのはなんなんだ
631:
19/10/16 16:05:11 .net
また不調で全然取得出来ない・・・
日本からのアクセスだけ弾いてるとかないよね?
この手のアーカイブ取得しまくってるのは日本人多いからとかで
632:
19/10/16 16:42:13 .net
>>618
>>596 >>598
633:名無しさん＠お腹いっぱい。
19/10/16 21:33:46.55 .net
・ブラウザが古い
・連投しすぎてて1日間のIPブロックを食らっている
・いつものシステム不調
好きな原因候補を選ぼう
634:
19/10/16 22:52:13 .net
これの最新がとれねえ URLﾘﾝｸ(www.dworks-ent.com)
過去サイトが全然関係ないっぽくて噴く
関連 ｽﾚﾘﾝｸ(liveplus板)
635:
19/10/16 23:47:39 .net
>>614
皮肉だなぁ。
>>621
変換すべき URL が HTML 内部に大量にあるため異常と判断され、
結果としてインデックスから外されているとか、そういう予感。
元のソースを見るとスタイルシートが <style> 要素で挿入されていて、
その中にフォント等の外部参照が 1000 個以上ある。
636:
19/10/17 01:07:43 .net
やっぱ全然取得できませんわ
最新のurlを入力すると一週間前のアーカイブのurlに飛ばされる
637:名無しさん＠お腹いっぱい。
19/10/17 08:42:12.81 .net
やってみた
スクショは全然ダメだったが普通のアーカイブは取れたと思う
URLﾘﾝｸ(web.archive.org)
638:名無しさん＠お腹いっぱい。
19/10/17 10:47:01.15 .net
first archiveかどうかの表示止めちゃったのかな
あれ割と好きだったんだが
639:名無しさん＠お腹いっぱい。
19/10/17 10:52:43.50 .net
>>625
いや今度は表示されたわ
単に通信が悪かっただけか
640:名無しさん＠お腹いっぱい。
19/10/17 18:58:41.63 .net
新しいSavePage、UserAgentが書き換わるせいかサイトのデフォルト言語が英語になってしまうな
まあ誰が取っても統一されるから良いといえば良いんだが
641:名無しさん＠お腹いっぱい。
19/10/18 01:24:35.21 .net
エラーだの警告文だので全然ページ取れない使えないサイトになってしまった・・・
642:名無しさん＠お腹いっぱい。
19/10/18 01:56:42.98 .net
さっきからまるで保存できないな
しばらく待つしかないようだ
643:
19/10/18 09:24:59 .net
昨日あたりからSave outlinksの調子もおかしいような
Save Page Nowフォームに投げたリンク元のURLのアーカイブは取れるけど、リンク先のは全然取れない
エラーも出ずにただワーキングカーソルが延々とぐるぐる回り続ける
回線速度やマシンスペックの問題ではないはずなんだけどな
数時間おきに間隔を空けて試してるが、やっぱり問題解消まで待つしかないのか
644:名無しさん＠お腹いっぱい。
19/10/18 10:08:22.49 .net
根気よくリトライしてdoneになったページも半日おいて確認してみたらｽﾞｺｰってのが高頻度発生
徒労感はんぱないんで安定するまでしばしのお別れ
645:名無しさん＠お腹いっぱい。
19/10/18 14:56:56.60 .net
>>630
>>631
自分も同じ現象になったけど、2日3日置いたらアーカイブされてたよ
表示上グルグル回ってるだけで内部的には取れてるのかも
646:名無しさん＠お腹いっぱい。
19/10/18 17:14:03.81 .net
数時間前のでもアーカイブ一覧を見ると全然残ってないのよね
いつか復活するだろうと取得し続けるけど精神的につらい
647:名無しさん＠お腹いっぱい。
19/10/18 18:49:14.19 .net
魚拓うつ
648:名無しさん＠お腹いっぱい。
19/10/18 21:24:19.73 .net
>>633
どうしても心配ならAPIで確認すればいいよ
こっちはすぐに反映される
URLﾘﾝｸ(archive.org)
649:名無しさん＠お腹いっぱい。
19/10/19 00:06:59.69 .net
ありがとう
でも試してみたら丸1日以上取得出来ていない模様・・orz
650:名無しさん＠お腹いっぱい。
19/10/19 00:20:52.13 .net
あまりにもエラー連発するからステータスコード毎に適宜リトライするようなスクリプト書いてたら調子良い時期に突入したらしく確認がとれねえ
651:名無しさん＠お腹いっぱい。
19/10/19 01:18:09.60 .net
/save/URLﾘﾝｸ(url~)にアクセスすると/saveに飛ばされるのは新たな仕様ですか？
652:名無しさん＠お腹いっぱい。
19/10/19 01:42:49.09 .net
URLﾘﾝｸ(i.imgur.com)
URLﾘﾝｸ(i.imgur.com)
653:12FfjE.jpg なんかもう訳分からぬ状況に突入してまっせ とにかくページ・画像ともに先に進めやしない >>634 もしかしたら自分はそれかもな… 先月辺りから取らなきゃいけないものが激増したから
654:名無しさん＠お腹いっぱい。
19/10/19 01:53:56.45 .net
業務じゃないんだろ？己を強迫するな力を抜け
ていうか不安定なIAの現状みても当分離れるのが正解
655:
19/10/19 02:05:19 .net
ウェイバックウェーイｗｗｗ
656:名無しさん＠お腹いっぱい。
19/10/19 03:11:39.38 .net
余計な機能いらねーから少しでも軽くしてくれ
657:名無しさん＠お腹いっぱい。
19/10/19 07:42:23.08 .net
殆どのサイトやページが何回登録押しても一発で簡単には？取れないようになってる
寄付集めて何改悪してんだよ
最悪だよ、これならスクショ取った方がマシだ
658:名無しさん＠お腹いっぱい。
19/10/19 08:33:50.57 .net
>>638
そうです
つい先日変更されたばかり
>>639
ブラウザのURL入力バーにweb.archive.org/save/URLﾘﾝｸ(example.com)と直打ちしたら自分も「Wayback Exception」になった
単なる不具合かもしれないが、もしかしたら/save/のページからの入力のみ受け付ける仕様変更になったのかもな
>>643
チェックボックスのオプションのことかな
あれ便利だから個人的には重宝してるんだけど人それぞれか
659:642
19/10/19 12:05:49.13 .net
>>644
>直打ちしたら自分も「Wayback Exception」になった
今試したら問題なくsaveできた
やっぱり一時的な不具合だったみたいだ
660:名無しさん＠お腹いっぱい。
19/10/20 12:41:01.64 .net
Summary機能死んでるな
661:名無しさん＠お腹いっぱい。
19/10/20 13:16:39.96 .net
/save/URLﾘﾝｸ(url~)→今まで通り保存
Save This Url→/saveに誘導
時々サーバーエラー返るけど保存できてるっぽいな
662:名無しさん＠お腹いっぱい。
19/10/21 03:54:27.94 .net
Bummer出現率が10倍になった気がするわ
663:名無しさん＠お腹いっぱい。
19/10/21 18:40:59.09 .net
前から1割以上出てた気がするんだがひょっとして出現率100%超えた？
664:名無しさん＠お腹いっぱい。
19/10/21 20:55:58.53 .net
Bummer出現率はどうも環境や時間帯によって変わるっぽいからな
自分は体感で0.5~2%くらいだが、5割を越える人もいるらしい
665:名無しさん＠お腹いっぱい。
19/10/23 00:37:32.27 .net
>>624
ありがとう
17 Oct 2019で撮れてるのをこちらでも確認
666:名無しさん＠お腹いっぱい。
19/10/23 09:50:03.69 .net
もっと積極的に寄付募っていいと思うんだけどな
Wikipediaなんてクソデカアピールしてるのに
667:名無しさん＠お腹いっぱい。
19/10/23 12:51:52.98 .net
あのコーヒー高いやつか
668:名無しさん＠お腹いっぱい。
19/10/23 16:02:36.31 .net
Wikipediaみたいなしつこい広告をされると却って寄付する気が失せるが、
Internet Archiveみたいに全く何も言ってこないと逆に心配になって寄付したくなってしまう
669:名無しさん＠お腹いっぱい。
19/10/24 12:46:11.33 .net
Save outlinksで読み込んでくれるリンクは50個が限界みたい
外部リンクがいくつあろうと最大で50個しか読み込まれてない
まあ無尽蔵に外部リンクを辿ると大変なことになるから制限をかけるのは無理ないけどな
ただ読み込むリンクをどういう基準で選定しているのかが気になる、もしかしたらランダムなのかもしれない
670:名無しさん＠お腹いっぱい。
19/10/25 09:27:42.02 .net
普通なら「先頭からパースして50個に達したら終了」とか、そんな感じで組むと思うけどな。
671:名無しさん＠お腹いっぱい。
19/10/25 16:28:24.43 .net
ブラウザの履歴消すとweb.archiveで取った筈の履歴がweb.archiveから消えてる事が多いんだけど、
どうしたらいいんでしょう…？
672:名無しさん＠お腹いっぱい。
19/10/25 16:39:28.87 .net
俺は専門家ではないが、それはたぶん別の話だな
673:名無しさん＠お腹いっぱい。
19/10/25 20:44:45.21 .net
100％それで消える事はない
多分、カレンダー経由かアーカイブURL直打ちかの違いだと思うけど（カレンダーは反映が遅い）
674:名無しさん＠お腹いっぱい。
19/10/25 23:04:26.68 .net
675:確かに100%ありえないな これまで見れてたアーカイブがブラウザの履歴を消した後見れなくなったって言いたいんだと解釈したけど、 そういうことならWayback側のシステム不具合と履歴消去のタイミングが偶然重なったんじゃないかな
676:名無しさん＠お腹いっぱい。
19/10/26 01:26:02 .net
あれ強制セーブどうやんだっけ
/save/にアドレス入れたとたん保存済みの古いページに飛ぶから現時点のが保存できん
677:名無しさん＠お腹いっぱい。
19/10/26 20:17:47.54 .net
>>661
それ保存されているはずでは？
アドレスの日時は今現在の時刻になっているはず。
ただし日本の時刻とはズレている
678:名無しさん＠お腹いっぱい。
19/10/27 09:59:27.01 .net
ああ騒がせてすまんかった やり方がよくなかったんだわ
ちゃんと保存されたのを確認
679:名無しさん＠お腹いっぱい。
19/10/27 19:18:43.25 .net
.isが.phになった
680:名無しさん＠お腹いっぱい。
19/10/27 20:18:10.50 .net
ヒィリピンか？
681:名無しさん＠お腹いっぱい。
19/10/27 20:43:47.15 .net
>>665
そうだ
682:214
19/10/28 21:12:51.70 .net
18 日あたりからでしょうか、一部の古いブラウザへの対応が復活していますね。
全く使い物にならなくなっていた Internet Explorer 11 で
カレンダ画面が描画できていることを確認。
URLﾘﾝｸ(i.imgur.com)
683:名無しさん＠お腹いっぱい。
19/10/28 21:44:28.72 .net
IE11はサポート現役のブラウザだからな
そうでなくっちゃ
684:名無しさん＠お腹いっぱい。
19/10/29 00:40:26 .net
Web開発やってるとIEはとにかく邪魔者でしかないんだけどな
個別対応とかが面倒だしセキュリティ上の懸念もある
IAもよくサポート復活したな、要望が多かったんだろうか
685:名無しさん＠お腹いっぱい。
19/11/01 01:10:39.55 .net
「ぐっちゃぐちゃだけど一応使える」程度でも十分だよね
686:名無しさん＠お腹いっぱい。
19/11/01 15:13:44.89 .net
相変わらず迷走中。ブロック期間を五分間に短縮。
URLﾘﾝｸ(o.5ch.net)
687:名無しさん＠お腹いっぱい。
19/11/03 01:35:00.29 .net
連投具合でブロック時間が変わるんだと予想
まあブロック時間が長くなるよりかはマシでしょ
688:名無しさん＠お腹いっぱい。
19/11/04 19:47:08.99 .net
あげとくよ
689:名無しさん＠お腹いっぱい。
19/11/04 22:36:49.74 .net
？ありがとう
690:名無しさん＠お腹いっぱい。
19/11/05 12:28:57.16 .net
URLの末尾が「?」だとアーカイブが取れないバグ無いか？
正確に言うと勝手に「?」が取られて意図しないページが取得される
例えば
example.com/test?
をアーカイブしようとしても
example.com/test
となってアーカイブできない
対策としては適当なクエリを付ければアーカイブできる。上の例なら
example.com/test?hoge
とすれば取れる、URLは変わるけど...
クエリの開始点と誤認識してるのかな？
691:名無しさん＠お腹いっぱい。
19/11/05 14:10:24.24 .net
これは参考になる
クリスタルひとしくんをあげたい
692:名無しさん＠お腹いっぱい。
19/11/05 15:27:44.29 .net
>>675
> URLの末尾が「?」
そんなサイトがあるのか。知らなかったのだ。
693:名無しさん＠お腹いっぱい。
19/11/05 20:17:21.03 .net
>>677
例えば
URLﾘﾝｸ(ja.wikipedia.org)
とか
694:名無しさん＠お腹いっぱい。
19/11/05 20:23:08.46 .net
>>678
パーセントエンコードされているのをデコードするマヌケ
695:名無しさん＠お腹いっぱい。
19/11/06 03:34:12.87 .net
URLをエンコードして保存しないとそりゃそうなるわな
696:名無しさん＠お腹いっぱい。
19/11/06 11:12:10 .net
そうですか、じゃあ保存方法を教えてくれ
URLﾘﾝｸ(web.archive.org)ソウナンですか%3F
697:名無しさん＠お腹いっぱい。
19/11/06 18:26:38.28 .net
自分で答え（符号化URL）書いてるのに気付いてないのか
っ web.archive.org/save/URLﾘﾝｸ(ja.wikipedia.org)
698:名無しさん＠お腹いっぱい。
19/11/07 09:39:00.60 .net
URL パーセントエンコーディング で検索
699:名無しさん＠お腹いっぱい。
19/11/07 16:38:16.92 .net
不適切なページ名 - Wikipedia
URLﾘﾝｸ(web.archive.org)
700:名無しさん＠お腹いっぱい。
19/11/07 18:57:16.91 .net
まあ?記号だけエンコードして
701:もそりゃ意味無いわな URLの日本語部分全部をエンコードせな
702:名無しさん＠お腹いっぱい。
19/11/07 19:01:10.50 .net
「URL パーセントエンコーディング」で検索して分からないならもはや絶望的だから諦めろ
703:214
19/11/07 20:22:03.37 .net
>>685
Edge なんかだと、location.href も document.URL も
decodeURI() された状態で入っていますからねぇ。
アドレスバーの中身をコピーした場合もまた然り。
URLﾘﾝｸ(ja.wikipedia.org)ソウナンですか%3F
まぁ同一ブラウザ内で単純に URLﾘﾝｸ(web.archive.org) を頭に付けて
アドレスバーへ再投入するだけなら問題は起こらないとは思いますが。
704:名無しさん＠お腹いっぱい。
19/11/07 23:07:13.43 .net
いや >>678 で自分で答え書いてるって
URLエンコードの理解以上に救いようがない
705:名無しさん＠お腹いっぱい。
19/11/08 20:42:41.32 .net
Wayback Machine
いつの間にかヤフーニュースのスクリーンショットを取れるように
なっていた。
これだとヤフーのトップページに遷移されることもない。
Save screen shot にチェックを入れてからクリック。
706:名無しさん＠お腹いっぱい。
19/11/08 21:35:11.25 .net
何を今更
707:名無しさん＠お腹いっぱい。
19/11/09 19:10:59.19 .net
何か「attention request」とか出る(´･ω･`)
708:名無しさん＠お腹いっぱい。
19/11/10 14:47:45.08 .net
午後から503が頻発すると思ったら
いきなりメンテナンスに突入
709:名無しさん＠お腹いっぱい。
19/11/10 17:47:38.07 .net
>>688
もし良かったら取得できたURLを張ってくれないか？
本当に取れてるなら悪いがマウント取りたいだけにしか見えなくてな
↓のカレンダーでは青丸になってるが取れてない（エンコード有り無し両方）
URLﾘﾝｸ(web.archive.org)ソウナンですか%3F
710:214
19/11/10 19:24:48.83 .net
個人的にまとめるとこんな感じかな。
末尾に ? (%3F) があると問題なのは間違いなさそう。
A) URLﾘﾝｸ(ja.wikipedia.org)
B) URLﾘﾝｸ(ja.wikipedia.org)
A が本来の URL、B は間違い。
A は先頭に ～/save/ を付けた URL にアクセスすると
暫くの間ウィキペのコンテンツが表示されるので、それが保存できているとは思う。
A のアーカイブ一覧、現在 10 件。
URLﾘﾝｸ(web.archive.org)
B のアーカイブ一覧、現在 2 件。
URLﾘﾝｸ(web.archive.org)
これらのカレンダ表示は、おそらく正しい値ではないかと思う。
ところが A の個別のアーカイブを開こうとすると、
なぜか B の個別のアーカイブにリダイレクトされてしまう。
711:名無しさん＠お腹いっぱい。
19/11/10 20:52:53.22 .net
web.archive.org のバグだね
本来エンコード済みなら無視しちゃいけない末尾の%3F (?) を無視しちゃってる
712:名無しさん＠お腹いっぱい。
19/11/11 01:49:34.32 .net
またなんか挙動がおかしいな
保存完了したから確認しようとすると「セーブしますか？」のページに飛ぶ
ドメインから引こうとしても1個もヒットしない
713:名無しさん＠お腹いっぱい。
19/11/11 19:47:40.14 .net
>>692
メンテナンスは事前に予告してほしいよな
714:名無しさん＠お腹いっぱい。
19/11/12 00:42:02.53 .net
アドレスの文字列にＮＧワードがあってublockが反応してるケースがあった
archive全体もスルーにしないとあかんかな
715:名無しさん＠お腹いっぱい。
19/11/12 23:49:49.89 .net
なるほどなあ
716:名無しさん＠お腹いっぱい。
19/11/14 06:06:11.27 .net
Internet Archive
We're experiencing some technical issues, cause
undetermined at the moment. Site availability may be
spotty for a while. We will update when we have more
news. Thanks for your patience!
5:49 - 2019年11月14日
URLﾘﾝｸ(twitter.com)
(deleted an unsolicited ad)
717:名無しさん＠お腹いっぱい。
19/11/14 06:10:32.45 .net
Internet Archive
Update: We should be stable again, looks like it was a
router issue.
6:06 - 2019年11月14日
URLﾘﾝｸ(twitter.com)
(deleted an unsolicited ad)
718:名無しさん＠お腹いっぱい。
19/11/14 14:43:21.
719:45 .net
720:名無しさん＠お腹いっぱい。
19/11/14 18:02:27.39 .net
正直日本ではこれ以上有名になって欲しくない
アーカイブの重要性が広まってない状態で有名になっても
アーカイブの削除や拒否だらけになる未来しかみえん
721:名無しさん＠お腹いっぱい。
19/11/19 14:17:20.49 .net
北斎美術館は何やらアクセス弾いてるねえ
722:名無しさん＠お腹いっぱい。
19/11/19 14:18:01.39 .net
>>703
国会図書館のアーカイブがもっと貪欲で解放的ならいいんだけど
723:名無しさん＠お腹いっぱい。
19/11/19 17:11:57.36 .net
公正利用の概念を広めて開放させるしかない
724:名無しさん＠お腹いっぱい。
19/11/19 20:27:30.18 .net
某所で炎上したとあるサイトの管理人がInternet Archiveに英語メール送って、証拠用にSavePageNowで取られたアーカイブを非表示にさせた事例は前に見たことがある
Archive.todayにもアーカイブ取ってる人がいたから証拠が消え失せることはなかったけど、Wayback Machineのアーカイブって結構危ういよね
725:名無しさん＠お腹いっぱい。
19/11/19 20:37:29.65 .net
ちなみにそのサイトは炎上騒ぎの後ia_archiverを弾くようにrobots.txtを変更してたけど、
SPNではブラウザのUserAgentが用いられるのでSPNでアーカイブを取ること自体は今でも可能なまま
ただし取得しても"This URL has been excluded from the Wayback Machine."という例の表示が出て閲覧はできない
"
726:名無しさん＠お腹いっぱい。
19/11/20 19:56:41.89 .net
Boomerを更新してもBoomerが出るようになった。
727:名無しさん＠お腹いっぱい。
19/11/20 22:06:09.19 .net
ぶまりまくり
728:名無しさん＠お腹いっぱい。
19/11/21 18:41:47.05 .net
outlinkが一覧の他のページも保存しちゃうから次のページのoutlink取得しようとしても10分以上待たなくてはならない。
取得直後のページは10分間保存なしにして、他のページだけ保存してくれればいいのに。
729:名無しさん＠お腹いっぱい。
19/11/21 20:46:01.10 .net
>>711
> outlinkが一覧の他のページも保存しちゃうから次のページのoutlink取得しようとしても10分以上待たなくてはならない。
あー、そうなのか。それは知らなかった。
730:名無しさん＠お腹いっぱい。
19/11/22 05:05:33 .net
MapionとかGoogle Mapも取れるようになってほしい。
画像の撮影場所を示すのに使われているんだよね。
731:名無しさん＠お腹いっぱい。
19/11/23 14:33:03.22 .net
先週辺りからまたおかしくなってるな。
新しく取得したものが、過去の一覧にすぐ反映されないとか。
または取得できたと思ったら、確認すたらまだ取得前の画面に戻っちゃったりとか。
732:名無しさん＠お腹いっぱい。
19/11/23 18:47:42.65 .net
またこいつか
733:名無しさん＠お腹いっぱい。
19/11/24 04:12:55 .net
503が返ってくるようになったので、アク禁されたのかと思ったが、
TOP開いたらScheduled Maintenanceだった。永久アク禁されてなければいいけど。
734:名無しさん＠お腹いっぱい。
19/11/24 14:07:26.69 .net
もう今日はお話にならねえくらい酷い状態だな
Sorry連発
かつ魚拓の結果が全然出て来ねえ
735:名無しさん＠お腹いっぱい。
19/11/24 17:09:39.82 .net
ﾋｹﾞｿｰﾘｰ
736:名無しさん＠お腹いっぱい。
19/11/24 18:20:09.27 .net
最近調子いいなぁと思ったら急に悪くなったりツンデレなのか？
>>717
今日はAPIにすら反映されてないから止めたほうが良さげ
737:名無しさん＠お腹いっぱい。
19/11/24 21:51:57.94 .net
あかんメンテ後ずっとこれや
This page is not available on the web
because of server error
738:名無しさん＠お腹いっぱい。
19/11/24 22:40:57.15 .net
使い物にならんな
深夜に取った分ちゃんと取れてるかも怪しい
739:名無しさん＠お腹いっぱい。
19/11/24 22:59:40.58 .net
物理的にどっかで断線でもしてるんじゃないかと疑うレベル
740:名無しさん＠お腹いっぱい。
19/11/25 01:04:25.15 .net
Wi-Fiの近くで電子レンジ使ってるのかもしれない
741:名無しさん＠お腹いっぱい。
19/11/25 08:18:55
742:.82 .net
743:名無しさん＠お腹いっぱい。
19/11/25 10:15:46.16 .net
ここ使えなくなったらすごく困る
744:名無しさん＠お腹いっぱい。
19/11/25 10:44:48.59 .net
とりあえず新規の取得は直ったっぽい?
745:名無しさん＠お腹いっぱい。
19/11/25 10:57:07.90 .net
いけるな
746:名無しさん＠お腹いっぱい。
19/11/25 13:34:09.71 .net
入れ替わりにウェブ魚拓がおかしくなってる
747:名無しさん＠お腹いっぱい。
19/11/26 22:33:36.61 .net
復旧そして寄付募集モードか
748:名無しさん＠お腹いっぱい。
19/11/27 09:30:14 .net
こんだけ不安定だと寄付のお願いの必死さに説得力がある
749:名無しさん＠お腹いっぱい。
19/11/27 13:29:45 .net
ここ数日保存したのを確認したらほぼ全滅
これじゃとても寄付はできんな
750:名無しさん＠お腹いっぱい。
19/11/27 13:38:00 .net
寄付しないと余計に酷くなるだろうし、財布に余裕が出来たら少し寄付しようかと思う
インターネットアーカイブが完全に使えなくなったら本当に困るし
751:名無しさん＠お腹いっぱい。
19/11/27 20:11:21.49 .net
Twitter社が半年以上ツイートしてないアカウントを12月に削除するらしい
故人のアカウントも消えてしまうのかと問題になってるんだけど消えたら困る
とりあえず急いで特に大事なツイートはここに保存してるけど
752:名無しさん＠お腹いっぱい。
19/11/27 21:41:08.20 .net
なにそれひどい
753:名無しさん＠お腹いっぱい。
19/11/27 23:33:06.17 .net
みんなが捨て垢やらサブ垢やら作りまくってるからサーバを圧迫してるんだろな
UserStreamを廃止したのも資金の問題があったみたいだし事情は分かるが、
にしてもログイン確認できなければ一括削除ってのは残酷すぎる気はするな
754:名無しさん＠お腹いっぱい。
19/11/28 01:48:23.89 .net
半年ってなあ
逆にbot投稿ならこれに引っかからずに生き残るんだろうし
バランス悪い結末になりそうだ
755:名無しさん＠お腹いっぱい。
19/11/28 11:40:49.76 .net
混乱と反対が大きかったためか、故人のアカウントをどうするか上手い方法が見つかるまで削除は当面延期するそうな
とりあえず余裕は出来たけど、Twitterのアーカイブという懸案事項もできたな
756:名無しさん＠お腹いっぱい。
19/11/28 15:06:24.40 .net
archive.is 鯖臨終か(´･ω･｀)？
#192q…とか出る 👀
Rock54: Caution(BBR-MD5:1322b9cf791dd10729e510ca36a73322)
757:名無しさん＠お腹いっぱい。
19/11/28 15:16:46.64 .net
archive.is試しに保存したが普通だぞ
IAの方が23日以降に保存した内容が時間とともに消えてヤバイ
758:名無しさん＠お腹いっぱい。
19/11/28 16:00:47.27 .net
URLﾘﾝｸ(news.livedoor.com)
759:名無しさん＠お腹いっぱい。
19/11/28 16:48:06.51 .net
>>738-739
確かに保存はできるが、いかんせん待ち時間がクソ長過ぎる。
案の定、デイ○ースポーツの芸能カテゴリー取ったら、
待ち時間のあいだに記事が一つ追加されて、先にIAで取ったやつと比べて
「ズレ」が生じちゃったじゃないか…。魚拓を取るなら、全て同じ条件で取りたいのに。
760:名無しさん＠お腹いっぱい。
19/11/28 16:52:32.45 .net
またこいつか
761:名無しさん＠お腹いっぱい。
19/11/28 17:09:30.25 .net
でも俺はやりたいんだよ。でもやるんだよ！文句あるか？
ただ、あそこはメンテナンスでもやったのか？
しぱらくデ○リースポーツの記事が、テキスト状態でしか取れなかったが、
今日取れたものは、以前と同じようにカラー・写真入りで取れてる。
762:名無しさん＠お腹いっぱい。
19/11/28 18:22:24.06 .net
そこまでデイリースポーツの完全なるアーカイブに固執する理由が気になる
傍から見てると、こういう言い方も良くないが正直異常に見えてしまう
763:名無しさん＠お腹いっぱい。
764:
それも固執している対象が個別の記事とかではなくて、 トップページとかカテゴリー別とかの一覧ページだからなｗｗｗ
765:名無しさん＠お腹いっぱい。
19/11/28 19:36:04.74 .net
デイリースポーツのマニア ＝ 熱狂的な阪神ファン
766:名無しさん＠お腹いっぱい。
19/11/28 19:54:18.49 .net
>>147あたりが初出かな。
キーボードをバンバン叩いてアーカイブを取得する行為そのもので
アドレナリンがピュピュッと出ちゃう人なんだろうな。
本当に必要性を感じているなら、自動化とかもう少し別の方向を
考えてるだろ。二年間もの間、何やってたんだ。
767:名無しさん＠お腹いっぱい。
19/11/28 21:51:58.70 .net
「自動化は信用ならない、自分の手でしっかりとアーカイブできたか確認したい」ということな分からないではないが、それにしても時間の無駄では？
768:名無しさん＠お腹いっぱい。
19/11/28 23:01:43.61 .net
実際画像メインのサイトなのに画像が全く取れておらず
アーカイブ検索時の邪魔になってるだけのアホアーカイブもチラホラ見かけるんで
確実にってのはわからなくはない
769:名無しさん＠お腹いっぱい。
19/11/28 23:27:32.18 .net
何？コレ
URLﾘﾝｸ(f.uploader.xzy.pw)
770:名無しさん＠お腹いっぱい。
19/11/28 23:56:56.97 .net
>>750
何年か前の閉鎖された海外ロダ群でコレよく見かけたな
先に読みづらい認証コードいれろってヤツ
771:214
19/11/29 12:25:26.34 .net
Archive.is の待ち時間がクソ長過ぎるという話。
同サイトで定期的にアーカイブを取得させるスクリプトを走らせていますが、
1. 事前に URLﾘﾝｸ(Archive.is) からトークンを取得。
2. ターゲット URL 等の情報を URLﾘﾝｸ(Archive.is) へ送信 (POST)。
3. 200 応答が返り、コンテントボディに loading.gif への参照が
含まれていればアーカイブ成功と判断し終了、あとは知らんぷり。
― 以上の手順で問題は起きていないですね。
取得開始からアーカイブ完了まで時間が掛かるのはあちら側のプロセスなので
仕方が無いとして、取得状況を羅列したページを繰り返し読ませるのは
人間向けのただの演出。
>>741
記事のリストはベースの HTML に含まれていて、アーカイブ時は一番最初に
保存されるファイルですから、待ち時間云々は無関係。
単にアーカイブを開始させるまでに時間が掛かってしまっただけ。
>>750
CloudFlare でホストされているサイトに Tor 経由でアクセスすると良く出ていましたね。
数ヶ月前にそれが突然出なくなってしまい、逆にこちらが「まさか生で繋がってる?」と
不安になったことがあります。
772:名無しさん＠お腹いっぱい。
19/11/29 13:07:14.17 .net
214氏には各アーカイブサイトの自動化の知見についてブログかQiitaかどこかにぜひまとめて文章化して欲しい
需要はかなりあると思うんだが
773:名無しさん＠お腹いっぱい。
19/11/29 14:16:06.48 .net
archive.is、内部リンクの置換が廃止された？
28日以降のアーカイブは元リンクに飛ぶ
774:名無しさん＠お腹いっぱい。
19/11/29 16:38:28.77 .net
23日以降から全部アーカイブ消えてるんだけど・・・・
775:名無しさん＠お腹いっぱい。
19/11/29 18:41:10.81 .net
なんかアーカイブしたはずなのに検索にURL入れてもアーカイブされて無いって出るんだけど…
それでもう一度アーカイブすると初めてアーカイブした扱いになってて、検索でURL入れるとまた無いってなるんだけど…なにこれ
776:名無しさん＠お腹いっぱい。
19/11/29 21:43:52.53 .net
もう一度やってみたらどうもアーカイブは一応とれてるみたいだけど
検索でURL入れても最近のアーカイブは結果に出てこなくなってるっぽい
777:名無しさん＠お腹いっぱい。
19/11/29 22:26:47.01 .net
昨日試しにこのスレ保存してブクマしといたが半日�
778:ﾙどで消えた 今はまともに保存できないらしい
779:名無しさん＠お腹いっぱい。
19/11/29 22:59:48.91 .net
保存関連の処理とアーカイブのインデクシング・閲覧関連の処理は別々のプログラムが担ってるからな
今回は後者の部分が不安定になってるんだと思う
780:名無しさん＠お腹いっぱい。
19/11/30 16:34:33.79 .net
これじゃ使い物にならんな
困ったもんだ
781:名無しさん＠お腹いっぱい。
19/11/30 21:34:11.13 .net
お金が無いから寄付できない
782:名無しさん＠お腹いっぱい。
19/12/01 03:28:20 .net
正常に戻ったらしい
783:名無しさん＠お腹いっぱい。
19/12/01 12:38:23.38 .net
おれはしんじないぞ
784:214
19/12/01 15:11:22.39 .net
>>759
ファイルが Internet Archive に保存できているかどうかを確認するために
先頭に URLﾘﾝｸ(web.archive.org)～ を付けた URL でチェックするのですが、
/2/ を保存日時の数字に置き換えた URL へリダイレクトできているのに、
つまり当該日時のアーカイブが存在することが判っているのに、
そのリダイレクト先では Save Page Now (404 Not Found)。
ここ二週間ほど、こんなことが度々起きています。
つくづく「別プロセスなんだなぁ」と感じます。
785:名無しさん＠お腹いっぱい。
19/12/01 16:13:17.83 .net
今回の件は寄付集めるための小細工にも思えたがな
786:名無しさん＠お腹いっぱい。
19/12/01 16:52:50.58 .net
そんな小細工なんてやられたら
瞬時で変わるやつが取れないじゃないか
こんな誤爆も取れやしない
URLﾘﾝｸ(i.imgur.com)
787:名無しさん＠お腹いっぱい。
19/12/01 17:04:17.49 .net
またこいつか
788:名無しさん＠お腹いっぱい。
19/12/01 17:08:17.88 .net
また手抜きか
789:名無しさん＠お腹いっぱい。
19/12/01 17:44:15.43 .net
普通にワンクリックで取っていても「リダイレクトが繰り返し行われました」
「Cookie を消去してみてください」という表示が時々出るな.
790:名無しさん＠お腹いっぱい。
19/12/01 18:34:06.36 .net
仕組みが良くわからん
こっちのクッキー使うのか
791:名無しさん＠お腹いっぱい。
19/12/01 21:43:13.83 .net
IAは「クッキーを食べないブラウザ」として動作するから
クッキーを食わせるために無限リダイレクトループ、
それがそっくりそのままアーカイブされてしまったんじゃないの？
792:名無しさん＠お腹いっぱい。
19/12/02 14:33:54.58 .net
一時的にIAを弾いてたとしても内部的には情報は保存されてるのか
消えたと思ってたが安心した
793:名無しさん＠お腹いっぱい。
19/12/02 15:20:57.07 .net
archive.is
robots.txtに従わない 👀
Rock54: Caution(BBR-MD5:1322b9cf791dd10729e510ca36a73322)
794:名無しさん＠お腹いっぱい。
19/12/02 15:59:43.26 .net
なにそのおめめ
795:名無しさん＠お腹いっぱい。
19/12/03 00:53:30 .net
donateに💗が付いてて笑った
というか60ペタバイト超えてたのね
URLﾘﾝｸ(archive.org)
796:名無しさん＠お腹いっぱい。
19/12/03 00:55:14 .net
>>775
あ、文字化けしちゃった
それハート
797:名無しさん＠お腹いっぱい。
19/12/03 01:43:21 .net
donate
草 URLﾘﾝｸ(i.imgur.com)
798:名無しさん＠お腹いっぱい。
19/12/03 03:42:51.04 .net
Donateリンクにハートマークって他のサイトでも結構見るよ
799:名無しさん＠お腹いっぱい。
19/12/03 08:47:03.97 .net
確かに英語圏のサイトだと結構よく見るよね
何かそういう文化か風習か何かがあるんだろうと思う
800:名無しさん＠お腹いっぱい。
19/12/03 12:11:20.12 .net
日本人が感じる猫なで声ニュアンスはないってことだろうか
801:名無しさん＠お腹いっぱい。
19/12/03 13:57:02.07 .net
60PBかぁ…
802:名無しさん＠お腹いっぱい。
19/12/03 14:31:13.73 .net
案外そんなもんなのな
803:名無しさん＠お腹いっぱい。
19/12/03 15:32:38.45 .net
多いと見るべきか少ないと見るべきか
804:名無しさん＠お腹いっぱい。
19/12/03 16:06:30.58 .net
再巡回時に同じデータだった場合「同じでした」とだけ記録してるのかな
それとも完全重複で保存してるのかな
805:名無しさん＠お腹いっぱい。
19/12/03 19:38:11.00 .net
スポーツ紙をアーカイブすると「記事を見る」の部分が折り畳まれる(´･ω･｀) 開けない(´･ω･｀)
806:名無しさん＠お腹いっぱい。
19/12/03 22:19:17.87 .net
またこいつか
807:名無しさん＠お腹いっぱい。
19/12/04 00:48:12 .net
どれだよ
808:名無しさん＠お腹いっぱい。
19/12/04 13:27:45.32 .net
>>785
自前でアーカイブ取るか？
鯖からのソース保存じゃなく、その瞬間ブラウザで表示してる状態で保存する自作のブックマークレットある
ブラウザでブックマークすれば保存できる
冒頭のjavascript:はブラウザによってはペーストしたときに自動で剥がれるので、剥がれてたら自分で付け直してブックマークすること
javascript:(()=>{'use strict';const c=new Date(),h=document.documentElement.cloneNode(true);
let n=h.querySelectorAll('[href]'),i=n.length-1;while(i>=0){n[i].href=new URL(n[i].href,location.href).href;i--;}n=h.querySelectorAll('[src]');i=n.length-1;while(i>=0){n[i].src=new URL(n[i].src,location.href).href;i--;}
const b=new Blob([new XMLSerializer().serializeToString(document.doctype)+h.outerHTML],{type:'text/html'});const a=document.createElement('a');
a.download=c.toUTCString()+
' - '+decodeURI(location.href).replace(/\*/g,'＊').replace(/\//g,'／').replace(/:/g,'：').replace(/:/g,'：').replace(/\\/g,'＼').replace(/\|/g,'│').substring(0,123)
+'.html';a.href=(URL||webkitURL).createObjectURL(b);a.click();})();
809:名無しさん＠お腹いっぱい。
19/12/04 13:41:01.27 .net
>>788
レスの一行制限で改行入れたけど、多分「"+"の前の改行」で動かんと思うから
改行消してやってくれ
改行全部取っても動くようにしてあるからそれでも良いが
810:名無しさん＠お腹いっぱい。
19/12/04 18:15:27.35 .net
最近のarchiveisはもう駄目だな
待ち時間長くなったうえに今日は巻き戻るから取得すらまともに行われない
811:名無しさん＠お腹いっぱい。
19/12/04 20:12:20.89 .net
昨日は魚拓経由でつかえたけど今日は何やってもだめだ
812:名無しさん＠お腹いっぱい。
19/12/04 20:29:10.85 .net
どうせまたシュポーツのはなしなんでしょう
813:名無しさん＠お腹いっぱい。
19/12/04 22:21:53.92 .net
いえいえシュポーチュでちゅよ
814:名無しさん＠お腹いっぱい。
19/12/04 23:06:06.88 .net
Archive.isやら何やらの話してる人はウェブ魚拓スレに行ってや
IAの話の中で他サービスの話題が出るのは分かるがこの場合はそうじゃないだろ
815:名無しさん＠お腹いっぱい。
19/12/04 23:25:27.70 .net
pixivって今アーカイブできない？
昔はできてた気がするけど
816:名無しさん＠お腹いっぱい。
19/12/05 01:05:02.52 .net
>>795
いくつかSPNに突っ込んで試してきた
保存完了の表示は出るけどWayback自体が不安定なせいか、アーカイブが表示できたり出来なかったりするんだよな
スクリーンショットの方はとりあえず取れてたから、おそらく普通のアーカイブの方も取れてるんじゃないかと思う
まとめると、おそらくアーカイブIA側が不安定だから
817:名無しさん＠お腹いっぱい。
19/12/05 01:07:00.25 .net
途中送信してしまった
まとめると、おそらくアーカイブは出来るがIA側が不安定なせいで上手く行ってないだけだと思われる
あとアーカイブ時に日本国外の回線からアクセスするので、英語版ページへリダイレクトされる点にも注意
818:名無しさん＠お腹いっぱい。
19/12/05 01:37:24 .net
>>796-797
なるほどサンクス
819:214
19/12/05 22:39:02.46 .net
ここでは、動画の内容に関する話は抜きで。
URLﾘﾝｸ(web.archive.org)
普通にアクセスを掛けても、どういう訳か 200 OK ではなく 206 Partial Content を返してくる。
当然、返してはいけない応答なので一般的なクライアントではダウンロードできない。
レスポンスヘッダを見ると
X-Archive-Orig-Content-Range: bytes 0-3091160/3091161
という行があるので、あるクライアントが Internet Archive に当該ファイルを
保存するよう要求したときに
Range: bytes=0-3091160
の指定が何故か付いてしまっていて、それがそのまま IA から video.twimg.com に送
820:られ、 範囲指定付きリクエストとして処理された応答が IA にアーカイブされた、 ということだと思う。 しかし、何をどうやったら範囲指定付きのアーカイブ要求なんか出るのかねぇ。
821:名無しさん＠お腹いっぱい。
19/12/06 01:10:23 .net
>>799
グロ
822:名無しさん＠お腹いっぱい。
19/12/06 16:10:30 .net
検証用環境がなくて断定出来ないので完全な予想だが、Heritrixか何かの設定のせいなのかもな
Save Page Now経由で取得できる動画の容量にあらかじめ制限をかけてあるんじゃないだろうか
動画はかなり通信量を食うし、無制限の取得を許可したら色々な面で大変な事になるだろうから、
そういうリミッターが存在しても不思議ではないと思う
823:名無しさん＠お腹いっぱい。
19/12/10 03:14:02.77 .net
うーんpixiv保存するとなぜかどうしても保存されるのが真っ白なページになってしまう
なぜだろう
824:名無しさん＠お腹いっぱい。
19/12/13 20:50:45.96 .net
やたらと寄付呼び掛けてるの何だろうと思ったら
データ量が急激に増えててヤバイらしいな
URLﾘﾝｸ(gigazine.net)
825:名無しさん＠お腹いっぱい。
19/12/14 00:52:12.88 .net
>>803
これはヤバいな
2019年だけで10ペタバイト、1996年～2011年に保存した量の2倍ものデータが追加されたとか…
いくら寄付を集めたところでこんな膨大な量がずっと増え続けていくんじゃじり貧になるのは目に見えてる気が…
お金だけじゃなくて置き場所も足りなくなりそう
AI使って同じだったりほとんど変化の無いページは消していくとかしないと
あとは結局クロールする範囲を元と同じに減らすしかなくなる気がする
それとクラウド使ってないってことはここのサーバーが火事とかになったら全部パーってことでそれも怖いな
Googleみたいに世界中に何十にもバックアップとか入念な事はしてなさそうだし
826:名無しさん＠お腹いっぱい。
19/12/14 01:24:28.94 .net
save now機能付けたころこのスレでも大丈夫なんかとは言われてたよね
827:名無しさん＠お腹いっぱい。
19/12/14 02:32:43.65 .net
10PB（10000TB）多杉ワロタ
828:名無しさん＠お腹いっぱい。
19/12/14 06:18:10.30 .net
どっかの富豪がポンと出してくれねえかな
829:名無しさん＠お腹いっぱい。
19/12/14 09:20:55.55 .net
不安定なのに寄付なんかできないとか言ってる人をどこかで見かけたがアホかと思う
寄付しないといけない状況だからこそ不安定なんだろ
830:806
19/12/14 09:32:00.38 .net
逆だな
不安定だからこそ寄付しないといけない
831:名無しさん＠お腹いっぱい。
19/12/14 13:01:50.15 .net
追加データに際限はなく増大の一途
後20年持つサービスではないな
832:名無しさん＠お腹いっぱい。
19/12/14 14:14:54.67 .net
まー言い換えれば最悪の場合その1996-2011のだけ残せばコスパ高そうだな
833:名無しさん＠お腹いっぱい。
19/12/14 22:59:39.72 .net
客観的に勧化得た場合
もしも残す価値や必要性があると思ったらお金持ちは寄付するだろうね
荒らしみたいなことを言ってすみません
834:名無しさん＠お腹いっぱい。
19/12/14 23:42:51.87 .net
ちっとも荒らしみたいではないし、ちっとも客観的でもない
835:名無しさん＠お腹いっぱい。
19/12/15 00:25:51.05 .net
確かに荒らしっぽくないし同時に客観的でもない
慈善事業にしてもそんな地味なことに金使う富豪はいないだろ
苦しんでる人を援助することに優先して金を使うと考えるのが妥当
836:名無しさん＠お腹いっぱい。
19/12/15 00:39:01.46 .net
ツイッターで100万くれる人たちに運営がいいねするのはどうだろうか
837:名無しさん＠お腹いっぱい。
19/12/15 05:26:37 .net
試しにvプリカ買ってきて寄付しようとしてみたけど寄付の受付部門にメールして問い合わせろって文章が表示されて弾かれっぱなし
海外の住所の書き方の通りにフォームは埋めたし、カードの番号も期限もセキュリティ
838:コードも全部確認したけど受け付けてもらえない 普通のクレジットカードからの寄付しか受け付けないってんなら、日本語版の案内を用意してない不親切さも頭に来るし寄付は無しだな
839:名無しさん＠お腹いっぱい。
19/12/15 09:24:11.52 .net
関係ないけどarchive.isの方でYouTubeのコメントが保存できるようになってるな
昔もできてたけどここ何年かはできなくなってたから嬉しい
Internet ArchiveだとYouTubeは保存できないから
840:名無しさん＠お腹いっぱい。
19/12/15 10:20:06.78 .net
Vプリカは向こうからは完全にVISAクレカと同じにしか見えないはず
841:名無しさん＠お腹いっぱい。
19/12/15 10:24:48.92 .net
いやVプリカが使えるとかどこにも書いてないだろ
PayPalアカウント持ってるならあらかじめ入金しておいた上で支払う事は出来ると思うが
むしろクレジットカードと同じようにしてVプリカを使えると思ってる方が間違ってるぞ
842:名無しさん＠お腹いっぱい。
19/12/15 10:32:20.60 .net
個人的な経験で理由は分からないけど、国外との支払いでVプリカ使うと上手くいかない場合がそれなりにある
PayPal併用した方が確実
843:名無しさん＠お腹いっぱい。
19/12/15 11:13:52 .net
>日本語版の案内を用意してない不親切さも頭に来る
随分身勝手な奴だな、Wikipediaじゃあるまいしそこまでするリソースも余裕もある訳無いだろうが
寄付関連の案内が全く存在しなかったら不親切と言えるだろうがそういう訳でもないし、
Google翻訳使えば読めるものを不親切だとか言うのはおかしい
5chは使える癖にGoogle翻訳を使う脳味噌は無いのな、哀れ
844:名無しさん＠お腹いっぱい。
19/12/15 13:05:17 .net
親衛隊が裾野の広がりを阻害するよくある構図を見た
845:名無しさん＠お腹いっぱい。
19/12/15 14:35:08 .net
信者とは大体そういうもの
846:名無しさん＠お腹いっぱい。
19/12/15 18:36:34.75 .net
寄付のお願いだけで済ませてくる分宗教としてはだいぶ良心的
本物の宗教と違って無くなったら困るけど
847:名無しさん＠お腹いっぱい。
19/12/15 19:09:23.94 .net
Internet Archive以外でネット情報の保存活動に積極的なところが全然無いのは
著作権とかの問題もあるがそれよりも結局はこうやって天文学的な量の情報が日々無限に増え続けていって困るのが予想できるからなんだろうな
それだけにあえて頑張っているここは貴重で応援したいが
本当にどうするんだろうな
もはや現代ではほとんどの情報がネット依存状態なのに
もしここが無くなったら人類の歴史で現代の情報だけがすっぽり消えてしまって空白地帯になって大損失だろう
848:名無しさん＠お腹いっぱい。
19/12/15 19:43:27.59 .net
AWSとかGoogleとかがやってくんねーかなー
849:名無しさん＠お腹いっぱい。
19/12/17 01:26:51.36 .net
Googleはやろうと思えば出来るだろうけど
まぁ結局金にならないっていう問題にぶち当たるんだよねぇ・・・
850:名無しさん＠お腹いっぱい。
19/12/17 04:03:11 .net
>>827
そもそも金になった時点で問題。
フェアユースの範疇から外れて、アーカイブ自体が違法コピーに成り下がる。
851:名無しさん＠お腹いっぱい。
19/12/17 13:09:42.33 .net
非営利団体だからこそWayback Machineなんてグレーな代物を運用できるわけで
Googleが寄付するって形にすれば法的にはセーフかもしれないが、Googleの金がInternet Archiveにまで入ったら法律とは別の問題でマズいことになりそう
852:名無しさん＠お腹いっぱい。
19/12/17 13:53:45.28 .net
伊達直人待ちw
853:名無しさん＠お腹いっぱい。
19/12/17 16:37:02.92 .net
翌朝、Internet Archiveのサーバーの前にピカピカのランドセルが
854:名無しさん＠お腹いっぱい。
19/12/17 19:47:03.01 .net
せめてHDD贈ってやれよ
855:名無しさん＠お腹いっぱい。
19/12/17 22:05:43.63 .net
ランドセルは安いモデルでも実用上大差ないけど安価なHDDはSMRだし…
856:名無しさん＠お腹いっぱい。
19/12/18 01:57:01 .net
outlinksがSavingのまま止まる
調子悪いのか
857:名無しさん＠お腹いっぱい。
19/12/18 16:51:08.99 .net
寄付のお願いが出始める前後からずっとoutlinksは不安定
858:名無しさん＠お腹いっぱい。
19/12/19 15:57:12.43 .net
英国立図書館のWebCiteはどう？
IA以上に貧化してるか…
859:名無しさん＠お腹いっぱい。
19/12/19 19:01:15.90 .net
WebCite は新しい魚拓は取れないのではなかったかな？
860:名無しさん＠お腹いっぱい。
19/12/19 21:15:03.17 .net
>>835
そうだったのかThx
861:名無しさん＠お腹いっぱい。
19/12/19 23:45:04.57 .net
安全な接続ができませんでしたって出る
862:名無しさん＠お腹いっぱい。
19/12/20 09:54:11.83 .net
ここってアメリカ政府とかも利用してなかったっけ？いざとなったらお偉いさんが金出して保護するんじゃないかな
863:名無しさん＠お腹いっぱい。
19/12/20 19:46:31.57 .net
そこまで楽観的でもない
非営利の図書館やアーカイブ団体はどこも大体同じように財政難に直面してる
世界最大規模の図書館として有名なニューヨーク公共図書館でさえ、資金繰りに四苦八苦して寄付を求めて駆けずり回ってる訳で
864:名無しさん＠お腹いっぱい。
19/12/23 16:11:26.79 .net
Job failed
865:名無しさん＠お腹いっぱい。
19/12/24 11:02:46.59 .net
寄付600万ドルがゴールになってるけど、そんだけでやってけるもんなのかね？
とりあえず5ドル投げたけど
866:名無しさん＠お腹いっぱい。
19/12/24 20:13:46.86 .net
いずれ枯渇はするけど当面はそれだけあればやって行けそう、ってことだと思う
867:名無しさん＠お腹いっぱい。
19/12/27 22:10:02.02 .net
最近Twitterのどんなちょっとした下らないいいねもリツイートもないような呟きでも全て即座に網羅的にここに保存されてる事に気づいた
そりゃパンクするわ
868:
19/12/28 09:51:39.93 .net
ほんとだ
>>733 のためかな？
869:名無しさん＠お腹いっぱい。
19/12/28 10:35:54.56 .net
調べたところ>>733の発表を受けてArchiveTeamが動いてるみたいだな
URLﾘﾝｸ(archive.org)
一応「故人のアカウントを保存する方法が見つかるまで削除延期」とTwitter側は言ってるけど、ArchiveTeamはそれで満足するような組織じゃないし
870:名無しさん＠お腹いっぱい。
19/12/28 10:54:17.93 .net
裏を返せば「保全する方法が見つかったら削除開始するよ」って意味でもある訳だからそりゃアーカイブするわ
871:名無しさん＠お腹いっぱい。
19/12/28 12:14:58.98 .net
Twitterと連携して全公開TweetデータをIAに渡してくれれば一番楽？
872:名無しさん＠お腹いっぱい。
19/12/28 15:51:27.64 .net
そのまえにGoogleでのリアルタイム検索を再開してくれよ
873:名無しさん＠お腹いっぱい。
19/12/28 18:46:36.33 .net
とりあえずアーカイブされたがurlがわからず
二度と発掘されないただの化石と化してるデータも多いだろう
874:名無しさん＠お腹いっぱい。
19/12/29 12:37:56.09 .net
今のアーカイブ量で全文検索したら凄まじい事になりそう
875:名無しさん＠お腹いっぱい。
19/12/29 20:38:31.40 .net
全文じゃなくてドメイン+<title>+日付範囲でも相当役に立つんだけどな…
876:名無しさん＠お腹いっぱい。
19/12/29 22:24:56.57 .net
検索エンジンの運用みたいに、先に索引付けしておくんじゃないの？知らんけど
877:名無しさん＠お腹いっぱい。
20/01/01 18:24:14.87 .net
誰も本当のことなんて知らんのよ
878:名無しさん＠お腹いっぱい。
20/01/01 21:53:26.32 .net
今年は何PB増えるのだろうか
879:名無しさん＠お腹いっぱい。
20/01/04 17:34:41.70 .net
また落ちてるみたいね
全然取得できない
880:名無しさん＠お腹いっぱい。
20/01/04 18:48:46.85 .net
メンテ画面になったね
果たして今回は何時間かかるのやら
881:名無しさん＠お腹いっぱい。
20/01/04 20:37:04.38 .net
We're sorry ? something's gone wrong.
Our team has been notified.
882:名無しさん＠お腹いっぱい。
20/01/04 20:50:33.63 .net
”donate done”が邪魔
883:名無しさん＠お腹いっぱい。
20/01/05 00:37:15.55 .net
復活したのか
884:名無しさん＠お腹いっぱい。
20/01/06 13:21:37.31 .net
punycode表記のURLの挙動がおかしくなるの
何とかならないのかね
885:名無しさん＠お腹いっぱい。
20/01/07 00:05:36.73 .net
600万ドルは確保出来たのかね
あとpaypalを通じて寄付をするって日本では違法だし、良くて規約違反でアカ消滅か悪くて警察沙汰にならね？
886:名無しさん＠お腹いっぱい。
20/01/07 00:38:36.73 .net
>>863
違法の根拠は?
887:名無しさん＠お腹いっぱい。
20/01/07 01:56:13.79 .net
>>864
URLﾘﾝｸ(donate.wikimedia.org)
A4%E3%83%91%E3%83%AB%E3%81%A7%E3%81%AE%E5%AF%84%E4%BB%98%E3%81%8C%E6%8B%92%E5%90%A6%E3%81%95%E3%82%8C%E3%81%9F%E3%81%AE%E3%81%A7%E3%81%99%E3%81%8B%EF%BC%9F
888:名無しさん＠お腹いっぱい。
20/01/07 12:56:41.99 .net
>>865
これ情報古くないか？
今は普通に受け付けてるぞ
889:名無しさん＠お腹いっぱい。
20/01/07 16:15:54.94 .net
URLﾘﾝｸ(2chan.tv)
890:名無しさん＠お腹いっぱい。
20/01/07 22:50:28 .net
>>867
スポーツ報知のアーカイブ頻度すごいな
いつぞやの人がついに自動化でも始めたのか
891:名無しさん＠お腹いっぱい。
20/01/07 23:43:03.07 .net
個人の自由とはいえ何が彼を熱心にさせているのか
892:名無しさん＠お腹いっぱい。
20/01/08 10:17:03.71 .net
まぁアーカイブという面では
そういう無償で熱心にやってくれる人が多い方がいいので
なんでそれに拘ってるのかは知らんが
893:名無しさん＠お腹いっぱい。
20/01/08 10:42:18.77 .net
その辺が、ただマウスをポチポチするだけの人と
そうで無い人との違いなのかと。
PCを使った単純繰り返しの定型作業、自動化させてみたら
それが原因で首切られたなんて話もあるくらいだからねぇ。
894:名無しさん＠お腹いっぱい。
20/01/08 13:11:21.35 .net
それにしても同一IPからこんな立て続けにリクエスト送れないはずだよな、自動で弾かれそうなもんだが
895:名無しさん＠お腹いっぱい。
20/01/08 16:25:36.62 .net
報知だけバグ？
報知
URLﾘﾝｸ(2chan.tv)
日刊スポーツ
URLﾘﾝｸ(2chan.tv)
896:名無しさん＠お腹いっぱい。
20/01/08 23:20:07.30 .net
F5連打で無駄に負荷かけまくってる悪質荒らしに近いな
897:名無しさん＠お腹いっぱい。
20/01/10 01:46:22.74 .net
Base64エンコードで画像埋め込んでるサイトが文字化けするっぽい？
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(up-img.net)
898:名無しさん＠お腹いっぱい。
20/01/13 07:11:00.39 .net
応答が不安定になってる
899:名無しさん＠お腹いっぱい。
20/01/13 15:48:21.42 .net
firstじゃないurlのは直近アーカイブからx週経過しないとNGの制限設ければいいのにな
未経過だと有料で取得できるようにすりゃタダで爆取得しやがる乞食のとばっちりもマシになる
900:名無しさん＠お腹いっぱい。
20/01/13 17:07:37.94 .net
>>851
5chの過去ログに貼られてる閉鎖済みサイトをURL検索で発掘したり…
>>871
手動だが、Wikipediaの編集記事とかYahooニュースとかTLS1.2未満のブラウザや端末から直接読めなくなったページを読むために保存している。
魚拓やisにも取ってるがアーカイヴサービスまでTLS1.2必須に仕様変えられないことを祈る。
901:名無しさん＠お腹いっぱい。
20/01/13 19:49:00.13 .net
Yahoo!ニュースをwaybackするとトップページがアーカイブされる
902:名無しさん＠お腹いっぱい。
20/01/13 21:13:26.42 .net
URLﾘﾝｸ(2chan.tv)
robots.txt noarchive
903:名無しさん＠お腹いっぱい。
20/01/13 23:25:29.31 .net
Yahooニュースはいったん他所で取ったアーカイブを重ね取りすれば流れないンだったか。
904:名無しさん＠お腹いっぱい。
20/01/14 06:15:46.82 .net
yjsecure.jsをNGすれば転送されない。散々既出
905:名無しさん＠お腹いっぱい。
20/01/14 20:36:57 .net
adblockの詳細設定のマイフィルターリストに「*/yjsecure.js」を登録してadblock有効
と設定すればいいんだっけ？
906:名無しさん＠お腹いっぱい。
20/01/15 09:16:22.85 .net
ここ数日は取得しても古いアーカイブにリダイレクトされて本当に取得してあるか確認できないようになっているので注意
907:名無しさん＠お腹いっぱい。
20/01/15 12:18:46 .net
5ちゃんのURLアーカイブできなくなってない？数日前からできないんだけど
908:名無しさん＠お腹いっぱい。
20/01/15 13:55:07.15 .net
で�
909:ｫる ttps://web.archive.org/web/20200115045246/https://mevius.5ch.net/test/read.cgi/esite/1475246713/l50
910:名無しさん＠お腹いっぱい。
20/01/15 15:44:52.91 .net
save page done. OK
URLﾘﾝｸ(2chan.tv)
911:名無しさん＠お腹いっぱい。
20/01/15 16:40:53.17 .net
スマホ(笑
912:名無しさん＠お腹いっぱい。
20/01/15 20:12:34.06 .net
なんか自分の環境からはなぜか5ちゃんだけがアーカイブできなくなってしまった
回線変えたり接続し直したりvpnかましたり何度もリトライしてみたり色々やったら何とかできたスレもあるけどできないスレはどうやってもダメだ…謎
913:名無しさん＠お腹いっぱい。
20/01/15 20:16:55.48 .net
しょうがないからscのスレでアーカイブしてる
914:名無しさん＠お腹いっぱい。
20/01/15 21:39:39.04 .net
ここ数日やっぱ調子悪いな～古いアーカイブ確認出来ない
915:名無しさん＠お腹いっぱい。
20/01/16 21:48:45 .net
また5ちゃん保存できるようになったわ
なんだったんだろう
916:名無しさん＠お腹いっぱい。
20/01/17 00:22:05.53 .net
pcからの利用なのに時々sp用ページになるのが地味にストレス
917:名無しさん＠お腹いっぱい。
20/01/17 20:23:12 .net
またアーカイブできない事がよく起きるようになった
5ちゃんだけじゃなくて他のサイトでもできなかったりたまにできたり…
不安定なのかな
918:名無しさん＠お腹いっぱい。
20/01/17 22:16:49 .net
ここ3~4日はアーカイブまともに取得できなくて厳しいは
ウェブアーカイブじゃないと正しく取得出来ない所あるのに・・・
919:名無しさん＠お腹いっぱい。
20/01/17 22:36:17 .net
SavePageNowのｸｯｼｮﾝﾍﾟｰｼﾞが頻繁に表示される
920:名無しさん＠お腹いっぱい。
20/01/18 16:57:15.18 .net
ステータスコード200以外でリトライするスクリプト組んで放置してたら400capturesとかになって笑ってる
921:名無しさん＠お腹いっぱい。
20/01/18 19:15:17 .net
クッションページ、画面は同じでURLに日付が入ってるやつと入ってないやつがあるっぽい。
922:214
20/01/19 18:51:43 .net
Internet Archive のファイルアップロード機能、あれを使うと
ユーザ登録に使っているメールアドレスが漏れるなぁ。
例としてこのファイルを挙げる。
URLﾘﾝｸ(archive.org)
右側の SHOW ALL のリンクからファイル一覧を開き、
ファイル名末尾が _meta.xml のファイルを見てみると、
<uploader> 要素の中にメールアドレスが記載されている。
元のページに戻り、Uploaded by で示されているアップロード者の
プロフページに入ってみる。
プロフのアバター画像は IA に直接アップロードすることもできるが、
この人はそれを行っていないため Gravatar の画像が参照されている。
Gravatar の画像 URL には、メールアドレスの MD5 ハッシュ値が含まれる。
先の XML から得たメールアドレスについて MD5 を取ってみると、双方の値が一致。
(大文字等を含むアドレスは一定の加工が必要だが、この例では無関係。)
つまり、XML から得たメールアドレスはユーザの登録アドレスで間違いない。
単に IA にユーザ登録を行ってプロフを持っているだけの状態からは
色々探してみたけど漏れっぽいものは見つからなかった。
ただアバター画像が初期状態のままだとメールアドレスのハッシュ値が
判るので、そこから他所で紐付けされてしまうことはあると思う。
923:名無しさん＠お腹いっぱい。
20/01/19 19:21:36 .net
>>899
それは本人のアドレスで間違ってない、数年前からセキュリティ面で指摘されてる。
念のために言うと漏れてるんじゃなくて、アーカイブの証明の為に記載してると思うけどね。
「アーカイブ」である以上何らかの本人確認は必要なので。
924:214
20/01/20 02:24:26 .net
>>900
やはり既出だったか。
メタ情報として「誰がアップロードしたか」を記録しておく必要が
あるのは解るが、こういう形で出てしまうのは「漏れる」と表現したいなぁ。
システム上でユーザ名を名乗らせておきながら、どうしてメアドで記録してしまうのか。
ユーザ名は「一度使用した名前は二度と再利用させない」
(一度変えたら元に戻すことすらできない) なんてロックを掛けたりしているので
こちらの方が重要な識別子なのかと思ったけど、そういう訳では無いんだな。
925:名無しさん＠お腹いっぱい。
20/01/24 19:49:09.37 .net
Browser crashedだらけ
926:名無しさん＠お腹いっぱい。
20/01/24 23:16:48 .net
>>902
Browser crashed visiting URL
chrome使いだが、ここ数日でよく見るようになったな。
かといって何回も取ったら、後になって「何でこんな大量？」ってなりそうだから、
マーキング感覚で、1～2回で留めるしかないのか。
927:名無しさん＠お腹いっぱい。
20/01/25 06:58:47 .net
最近どのサイトも全然アーカイブできない…
928:名無しさん＠お腹いっぱい。
20/01/25 15:55:38.68 .net
tamperだかgreaseだかでリトライし続けるようにすればいつかアーカイブされるし…
929:名無しさん＠お腹いっぱい。
20/01/25 17:15:48.05 .net
アーカイブ出来てないように見えて後日チェックしてみるとアーカイブされてたってのはある
チェックしてみろ
930:名無しさん＠お腹いっぱい。
20/01/25 19:41:42 .net
/save/で保存してapiで確認して取れてなかったらもっかい保存
931:名無しさん＠お腹いっぱい。
20/01/26 13:38:27 .net
最近APIも反映が遅くてな・・・
まぁ一定周期で重くなるのはいつもの事だし、気長に待つけども
932:名無しさん＠お腹いっぱい。
20/01/26 21:12:27 .net
save outlinksにチェックを入れて保存しようとすると↓みたいなエラーになるな。
URLﾘﾝｸ(2chan.tv)
まぁ、今朝の9時から18時前位まで全く保存が効かなかったからそれよりはマシだけどさ…
933:◆P0jSlC5fJs
20/01/27 01:59:35 .net
save outlinksなしでもJob failed
26日から
934:名無しさん＠お腹いっぱい。
20/01/27 02:32:40.79 .net
今サイトにアクセスできなくなってる
935:名無しさん＠お腹いっぱい。
20/01/27 17:18:56 .net
Job failed
ヨブがやらかした
936:214
20/01/30 20:22:04 .net
なんか玉葱経由で保管させると後でアーカイブが消されてるような気がするけど
気のせいかな。
sssp://o.5ch.net/1m0cm.png
937:名無しさん＠お腹いっぱい。
20/01/31 22:02:36.33 .net
Twitterの仕様変更のせいかアーカイブ出来なくなってしまった
938:名無しさん＠お腹いっぱい。
20/01/31 23:29:38.35 .net
save outlinksにチェック入れて保存するもリンク先が記録できず
今日でサービス終了するサイトなんで頼む…
939:名無しさん＠お腹いっぱい。
20/01/31 23:33:58.40 .net
保存時にエラーっぽい表示はなかったし
saveしたページ自体はもう反映されてるが、そのリンク先だけ見れないのでタイムラグだとしても妙
かといってもう一回叩くのも負荷になるしやめたい
940:名無しさん＠お腹いっぱい。
20/01/31 23:43:47 .net
試しにもう一回やったらsave outlinksにチェック入れてるのにそのページしか保存してないorz
941:名無しさん＠お腹いっぱい。
20/01/31 23:44:20 .net
Save error pages抜きとsave outlinksチェックは両立しない？？
942:名無しさん＠お腹いっぱい。
20/02/01 17:40:18 .net
ツッイターどうすれば
943:名無しさん＠お腹いっぱい。
20/02/01 20:01:43.92 .net
>>919
IAが苦手な形式になったから無理だと思う
download elementsを見ると画像とかは取れてるみたいだが・・・
944:名無しさん＠お腹いっぱい。
20/02/01 20:39:24.53 .net
最近本気保存してたことへの意趣返しなの？
945:名無しさん＠お腹いっぱい。
20/02/02 11:38:13 .net
TwitterはmegalodonやArchive.todayの方がまだ取りやすい気がしてきた
>>920
苦手な形式になったってどういうことなんや
詳しく教えてくれないか
946:名無しさん＠お腹いっぱい。
20/02/02 14:50:40.09 .net
todayの方だと普通に取れるね>Twitter
謎だ
947:名無しさん＠お腹いっぱい。
20/02/02 18:22:01 .net
IE11のUAだと古いのになるはずよね
948:名無しさん＠お腹いっぱい。
20/02/03 21:18:00 .net
save outlinksが無くなってる…
URLﾘﾝｸ(2chan.tv)
949:名無しさん＠お腹いっぱい。
20/02/03 21:33:12 .net
>>925
サインインしろって書いてるよ
950:名無しさん＠お腹いっぱい。
20/02/03 21:49:45 .net
アウトしてしまったか
951:名無しさん＠お腹いっぱい。
20/02/05 16:24:47 .net
Wayback はサインイン（ログイン）しないと
スクリーンショットが取れない仕様に改変された。
ヤフーニュースの魚拓を取るときには注意しよう。
952:名無しさん＠お腹いっぱい。
20/02/05 18:55:39 .net
>>928
前からじゃなかったか？
953:名無しさん＠お腹いっぱい。
20/02/05 19:43:07.89 .net
>>929
半月ぐらい前はそうではなかった。
954:名無しさん＠お腹いっぱい。
20/02/07 11:17:42 .net
Twitterが全然とれん…
955:214
20/02/07 12:36:52.45 .net
Firefox で general.userag
956:ent.override に Mozilla/5.0 (Windows NT 6.3; WOW64; Trident/7.0; Touch; .NET4.0E; .NET4.0C; .NET CLR 3.5.30729; .NET CLR 2.0.50727; .NET CLR 3.0.30729; Tablet PC 2.0; rv:11.0) like Gecko と入れてやってみたら、こんな感じ↓。 http://web.archive.org/web/20200207033245/twitter.com/TwitterJP/status/1224802584650584064 (deleted an unsolicited ad)
957:214
20/02/07 12:42:22.25 .net
>>932 の User-Agent、たまたま拾ったのがこの文字列だっただけなので
Internet Explorer と判定されるような内容なら何でも良いと思う。
958:名無しさん＠お腹いっぱい。
20/02/07 14:01:40 .net
おお
959:名無しさん＠お腹いっぱい。
20/02/07 14:02:43 .net
最初からgeneral.useragent.override.web.archive.orgに入れっぱなしでもいいのかも
960:名無しさん＠お腹いっぱい。
20/02/15 11:51:31.56 .net
なぜかInternet Explorer経由でないとTwitterのアーカイブが取れないのね
961:名無しさん＠お腹いっぱい。
20/02/15 18:14:13.15 .net
別に何故かでもないんだけど今後IAはこういうのどうするのかな
962:名無しさん＠お腹いっぱい。
20/02/15 20:28:10 .net
なんかTwitter何も対策せずに取れるようになってるな
要望が多かったんだろうか？
963:名無しさん＠お腹いっぱい。
20/02/16 15:56:32.12 .net
504 Gateway Time-out
964:名無しさん＠お腹いっぱい。
20/02/17 20:37:04.68 .net
もしかしてルートパスのリンク取れないのか
965:名無しさん＠お腹いっぱい。
20/02/22 09:16:04.83 .net
ロイター通信の記事キャプチャがおかしくなる
本文が空白で読めない
米とタリバン、29日に和平合意調印 暴力削減期間の終了後に - ロイター
URLﾘﾝｸ(web.archive.org)
コラム：円急落、「安全通貨」の機能終えんか＝佐々木融氏 - ロイター
URLﾘﾝｸ(web.archive.org)
アマゾンはURLエンコードすれば通るんちゃう？
URLﾘﾝｸ(a%4Dazon.co.jp)
966:名無しさん＠お腹いっぱい。
20/02/22 09:22:08.04 .net
アマゾンは無関係
テストスレと間違えて追加してしまった失礼
967:名無しさん＠お腹いっぱい。
20/02/22 16:29:21.75 .net
>>941
> 米とタリバン、29日に和平合意調印 暴力削減期間の終了後に - ロイター
> URLﾘﾝｸ(web.archive.org)
今見たら問題ないみたいだけど？
968:名無しさん＠お腹いっぱい。
20/02/23 13:49:38.14 .net
なんかToo Many Requestsの判定おかしくないか？
明らかに上限に達してないのにブロックされるんだが
969:名無しさん＠お腹いっぱい。
20/02/23 15:47:02.49 .net
制限がより厳しくなったのでは？分からないけど
970:名無しさん＠お腹いっぱい。
20/02/23 18:40:51.62 .net
要求間隔が短すぎると弾かれる。
少しあければ５分経ってなくても返ってくる。
971:名無しさん＠お腹いっぱい。
20/02/24 23:02:16 .net
気持ち悪いくらいｻｸｻｸ応答するな
今のうちにいろいろやっておくべきか
972:名無しさん＠お腹いっぱい。
20/02/26 14:26:12.32 .net
>>943
ありがとう
今見たらアーカイブ自体が消えていたから取り直したら見れた
973:名無しさん＠お腹いっぱい。
20/02/26 19:35:58.41 .net
URLﾘﾝｸ(gigazine.net)
マジか
974:名無しさん＠お腹いっぱい。
20/02/26 20:37:40.94 .net
まとめてとったやつも全部消えてる…
975:名無しさん＠お腹いっぱい。
20/02/27 00:26:30.17 .net
20年以降に保存したのが見えないのか消えてんのか知らんけど
最後に保存したのが2019のものになってんな
976:名無しさん＠お腹いっぱい。
20/02/27 00:29:13.91 .net
消えてないのもあるな
向こうでメンテか何かやってるだけか
977:名無しさん＠お腹いっぱい。
20/02/27 01:53:05 .net
魚拓音痴の質問もいいのかな…
魚拓の確認でカレンダーを開いた時に緑丸のページは絶対に見れない仕様ですか?
自分で調べたら緑丸=リダイレクトはわかったのですが緑丸を見る方法が見つからなくて書き込みまし
978:た 初心者過ぎる質問で申し訳ないです
979:名無しさん＠お腹いっぱい。
20/02/28 00:14:02 .net
申し訳ないんだが「緑丸のページを見る」ってのが何を言いたいのかよく分からない
リダイレクト先のページがWayback Machineに保存されてたら見れるし、保存されてなかったら見れない、という仕様のはずだけど
980:名無しさん＠お腹いっぱい。
20/02/28 11:25:46 .net
Yahooみたいなページの話なら
JavaScript無効化すれば見れるはず
981:名無しさん＠お腹いっぱい。
20/03/02 16:30:56 .net
>>955
ダメみたいです
スマホで閲覧してるのですがjavasScriptをオフにしても特に変化はありませんでした
因みに調べているのはbekkoameというサイトです
982:214
20/03/03 09:45:19.77 .net
リダイレクト応答のコンテントボディが見たいとか、
そんなニッチな話かと思ったけどどうやら違うようだ・・・。
そもそもリダイレクトがどういうものか、質問者氏は理解されていますか。
他の URL を提示して「代わりにここを見よ」と指示するものですから、
リダイレクト自体にそれ以上の内容はありません。
Internet Archive のカレンダで緑色で表示されている、つまり
クロール時にリダイレクトが返された旨記録されているアーカイブを
開くと、数秒後にその当時リダイレクト先として示されていた URL の
アーカイブの読み込みが始まります。
いくらリダイレクト先として示されていたからと言っても、所詮は別の URL です。
当該 URL が Internet Archive にアーカイブされているかどうかは、
元の URL がアーカイブされていることとはあまり関係がありません。
983:名無しさん＠お腹いっぱい。
20/03/05 21:02:07.03 .net
/save/ではなくて/web/2/でもToo Many Requestsが出るようになったっぽいね
984:名無しさん＠お腹いっぱい。
20/03/08 12:59:52.71 .net
Summaryタブがあるドメインと無いドメインの違いって何なんだろ？
数年経ってるのに無いのもあれば、半年程度であるドメインもあるし
取得数って訳でも無さそうだしなぁ・・・
985:名無しさん＠お腹いっぱい。
20/03/09 08:46:14 .net
本日で一旦、毎日やっていた作業を休止します。
986:名無しさん＠お腹いっぱい。
20/03/09 08:57:41 .net
何の話だよ
987:名無しさん＠お腹いっぱい。
20/03/10 19:21:31.04 .net
画像とかアーカイブするときのプログレスバー消えた？
988:名無しさん＠お腹いっぱい。
20/03/12 22:50:35 .net
また改悪しやがったな
989:名無しさん＠お腹いっぱい。
20/03/13 05:03:41.08 .net
なんか保存にすごく時間がかかる...
どうなってんだ
990:名無しさん＠お腹いっぱい。
20/03/16 00:16:36 .net
使い物にならない
991:名無しさん＠お腹いっぱい。
20/03/16 08:06:34.04 .net
The same snapshot had been made 38 seconds ago.
↑これ出てるのにAPIでは保存されていないことになってる
/save/でも保存できないし、できるのは保存済みアーカイブの閲覧だけか
992:名無しさん＠お腹いっぱい。
20/03/16 15:04:49 .net
なんだアゴ
993:名無しさん＠お腹いっぱい。
20/03/16 21:11:50.13 .net
>>967
いまどきアゴ勇のステマをやる人がいるとは！
994:名無しさん＠お腹いっぱい。
20/03/17 15:30:21.74 .net
昨日アーカイブしてさらに数時間後に確認もしたのに
今日になったらアーカイブされていないことになってる
やり直したらFirst Archiveとなって確認してもちゃんとアーカイブできてるのだが
明日は消えていそう
995:名無しさん＠お腹いっぱい。
20/03/18 07:31:20.97 .net
>昨日アーカイブしてさらに数時間後に確認もしたのに
>今日になったらアーカイブされていないことになってる
URLﾘﾝｸ(web.archive.org)の事なら俺もまったく同じ状態
URLﾘﾝｸ(archive.fo)は問題なかったけど、昨晩から使えなくなって保存中の画面になったまま終わらない
996:名無しさん＠お腹いっぱい。
20/03/21 10:28:41 .net
【保存・記録】ウェブアーカイブ総合 Page.01
2020/02/25(火) 23:55:53.96 ID:jlsY//Cy0
>>347
Internet Archiveはアーカイブ実行用クローラ(Heritrix)と
保存したアーカイブの専用ビューワ(Wayback)を組み合わせて動いてるんで、
保存したアーカイブがサーバ不調で一時的に見られなくなってても、
アーカイブさえきちんと出来てればそのうち問題なく見られるようになる
997:名無しさん＠お腹いっぱい。
20/03/21 15:32:44 .net
cube newsの単純な構造なら動画も一緒に保存できるっぽい
998:名無しさん＠お腹いっぱい。
20/03/21 17
999::03:14 .net
1000:名無しさん＠お腹いっぱい。
20/03/25 05:21:37.56 .net
保守
1001:214
20/03/29 07:42:30.68 .net
調子悪いですねぇ。
URLﾘﾝｸ(o.5ch.net)
1002:名無しさん＠お腹いっぱい。
20/03/29 18:02:52 .net
Summary死んでる
1003:名無しさん＠お腹いっぱい。
20/03/30 07:51:46 .net
URLﾘﾝｸ(i.imgur.com)
1004:名無しさん＠お腹いっぱい。
20/03/30 12:16:23 .net
API止まってるのかな
1005:名無しさん＠お腹いっぱい。
20/03/31 09:57:47.50 .net
503ばっか出て繋がんねぇと思ったらまたメンテか
1006:名無しさん＠お腹いっぱい。
20/03/31 14:32:48.47 .net
APIおかしい
大昔のキャプチャがちゃんとあるのに、APIでは保存されていないことになってる。
1007:名無しさん＠お腹いっぱい。
20/03/31 19:39:22 .net
コロナのせいでアクセスが増えてるんかね？
1008:名無しさん＠お腹いっぱい。
20/04/01 02:08:14.04 .net
IA特有のヘッダが表示されなくなった
1009:名無しさん＠お腹いっぱい。
20/04/01 12:42:17.49 .net
>>981
Internet Archiveが無料で色々な本を公開したからアクセス増えてキャパオーバーした可能性あるね
1010:名無しさん＠お腹いっぱい。
20/04/01 21:18:57.29 .net
そろそろ次スレたのんます
1011:名無しさん＠お腹いっぱい。
20/04/02 02:09:07 .net
立てたよ
URLﾘﾝｸ(mevius.2ch.sc)
1012:214
20/04/02 03:35:05.77 .net
>>985
乙
テンプレの二つの Q&A は永久保存ですかw
2011 年夏の UTF-8 化以降意味を成さなくなってますが。
1013:名無しさん＠お腹いっぱい。
20/04/02 12:24:52 .net
API何時になったら直るんだ・・・
1014:983
20/04/02 13:23:35.28 .net
>>986
テンプレはとりあえずそのままにしただけです
4スレ目以降はQ&Aちゃんと整理しなくては
1015:名無しさん＠お腹いっぱい。
20/04/06 15:12:29.34 .net
インターネット・アーカイブの無料電子書籍貸し出しに著者団体が抗議
URLﾘﾝｸ(hon.jp)
インターネット・アーカイブ（Internet Archive）は先月24日、
140万冊のEブックが読める「National Emergency Library」
をオープンし6月末までをめどにユーザーが1人10冊まで借りて
読むことができるようにしたが著者団体が反対の声を上げている。
1016:名無しさん＠お腹いっぱい。
20/04/08 12:50:51 .net
URLﾘﾝｸ(web.archive.org)URLﾘﾝｸ(www.mynewsjapan.com)
> 現在メンテナンス中です
> 現在、アクセス妨害行為によって、サイトにアクセスできない状況となり、
> ご不便をおかけしております。何者かが業務妨害をしている模様です。
> 警察庁サイバー犯罪対策班が犯人を逮捕次第、詳細にご報告します。
> 万全を期すため、一時的に停止して、安全を確認しております。
> 対策のうえ、早々に復旧しますので少々お待ちください。
> My News Japan
1017:名無しさん＠お腹いっぱい。
20/04/10 14:21:05 .net
半年以上前に保存されてたページを保存しなおしたら何故かFirst Archiveになった
1018:名無しさん＠お腹いっぱい。
20/04/10 16:00:15.06 .net
次スレが立っているからこっちのスレは埋めよう
1019:名無しさん＠お腹いっぱい。
20/04/10 16:00:35.20 .net
埋め宮アンナ
1020:名無しさん＠お腹いっぱい。
20/04/10 18:49:01 .net
コロナだろうと保存するぜ
1021:名無しさん＠お腹いっぱい。
20/04/10 20:53:52 .net
埋め
調子悪いの直らないねぇ
コロナでスタッフも休んでるんだろうか
1022:名無しさん＠お腹いっぱい。
20/04/10 21:39:21.30 .net
コロナ資料を保存
1023:名無しさん＠お腹いっぱい。
20/04/10 22:48:35.61 .net
test
1024:名無しさん＠お腹いっぱい。
20/04/10 22:48:50.40 .net
test2
1025:名無しさん＠お腹いっぱい。
20/04/10 22:48:59.86 .net
💩
1026:名無しさん＠お腹いっぱい。
20/04/10 22:49:11.01 .net
💩💩
1027:名無しさん＠お腹いっぱい。
20/04/10 22:49:21.10 .net
1000
1028:名無しさん＠お腹いっぱい。
20/04/10 22:49:35.05 .net
#,
1029:1001
Over 1000 Thread.net
このスレッドは１０００を超えました。
新しいスレッドを立ててください。
life time: 1287日 23時間 4分 22秒
1030:過去ログ ★
[過去ログ]
■ このスレッドは過去ログ倉庫に格納されています