既出かもしれないけどアーカイブ済のURL一覧を出力する方法見つけたから書いとく
https://exposureninja.com/blog/extract-urls-archive-org/
から引用
まず
http://web.archive.org/cdx/search/cdx?url=example.com*&output=txt
にアクセス、example.comのところをアーカイブしたページのトップページURLに変えればいい、*を誤って消さないようにすること
大量のテキストが出るので全選択してコピー
Excel立ち上げてCtrl+Aで全選択して貼り付け
その後「テキストから列へ」を選んでスペースを基準にセルを区切る
あとはセル列のアルファベット文字をクリックしたらその列が全選択になるからURLの列をコピーしてテキストエディタに貼り付けるなりすればいい
注意なのがこれ同じURLでも保存した時間分の数書いてあるから置換ツールで重複した行を消すこと
IAのURLsでは10000個までしか表示できないがこの方法使ってアーカイブされたURLの正確な総数がわかるはず
これに自分が集めたURLリストを付け加えて重複行消す処理を行うと未アーカイブURLだけ割り出せるのでだいぶ楽になる
WEB版のExcelだと貼り付け時に容量オーバーで受け付けてくれないことがあるからその場合はLibreOffice Calcでも使えばいい
LibreOfficeの場合貼り付け後、表全体の全選択を解除し、1回セルAをクリックしてセルAを全選択した後、データ→テキストから列へ を選ぶことでセル分け可能
探検
Internet Archive総合 (web.archive.org) #4
■ このスレッドは過去ログ倉庫に格納されています
332名無しさん@お腹いっぱい。
2022/03/08(火) 20:45:44.86■ このスレッドは過去ログ倉庫に格納されています
ニュース
- 元警視庁捜査第一課・佐藤誠氏 「中居正広という男、海老蔵さんの事件や押尾学の事件で被疑者を調べていた際、よく名前が挙がっていた」 [冬月記者★]
- 【文春】中居正広が松本人志「恐怖のスイートルーム」飲み会に参加していた! 部屋にはスピードワゴン小沢の姿も… ★9 [Ailuropoda melanoleuca★]
- 小籔千豊 中居正広の女性トラブル「何もわからんのが現状…何も判断できない」「週刊誌報道でわーってなるの、もうやめへん?」 [Anonymous★]
- 渋谷パルコ前「人が落ちてきた」 男性転落死、路上の人に接触か [蚤の市★]
- 【文春】中居正広が松本人志「恐怖のスイートルーム」飲み会に参加していた! 部屋にはスピードワゴン小沢の姿も… ★10 [Ailuropoda melanoleuca★]
- 法政大ハンマー殴打の女、「日本経済論」授業中に犯行 [少考さん★]
- 【原点回帰】しぐれういスレ☔
- けー🙄ってなんですか?🏡
- 【悲報】嫌儲で暴言が発生 [407474715]
- 【悲報】「豚丼」、普通にわかりにくい [279254606]
- ERROR 404 not found🏡
- 00:00:00.000