既出かもしれないけどアーカイブ済のURL一覧を出力する方法見つけたから書いとく
https://exposureninja.com/blog/extract-urls-archive-org/
から引用
まず
http://web.archive.org/cdx/search/cdx?url=example.com*&output=txt
にアクセス、example.comのところをアーカイブしたページのトップページURLに変えればいい、*を誤って消さないようにすること
大量のテキストが出るので全選択してコピー
Excel立ち上げてCtrl+Aで全選択して貼り付け
その後「テキストから列へ」を選んでスペースを基準にセルを区切る
あとはセル列のアルファベット文字をクリックしたらその列が全選択になるからURLの列をコピーしてテキストエディタに貼り付けるなりすればいい
注意なのがこれ同じURLでも保存した時間分の数書いてあるから置換ツールで重複した行を消すこと
IAのURLsでは10000個までしか表示できないがこの方法使ってアーカイブされたURLの正確な総数がわかるはず
これに自分が集めたURLリストを付け加えて重複行消す処理を行うと未アーカイブURLだけ割り出せるのでだいぶ楽になる
WEB版のExcelだと貼り付け時に容量オーバーで受け付けてくれないことがあるからその場合はLibreOffice Calcでも使えばいい
LibreOfficeの場合貼り付け後、表全体の全選択を解除し、1回セルAをクリックしてセルAを全選択した後、データ→テキストから列へ を選ぶことでセル分け可能
探検
Internet Archive総合 (web.archive.org) #4
■ このスレッドは過去ログ倉庫に格納されています
332名無しさん@お腹いっぱい。
2022/03/08(火) 20:45:44.86■ このスレッドは過去ログ倉庫に格納されています
ニュース
- 維新・吉村氏「交渉停滞を他党のせいにするな」 国民・榛葉氏に反論 [蚤の市★]
- 【広島】リヤカーで27歳女性がおにぎり販売 元契約社員が見つけた「天職」 [おっさん友の会★]
- トランプ大統領、ゼレンスキー氏を「独裁者」と批判 [Hitzeschleier★]
- 【茨城】暴力団をやめ5年たつのに口座開設拒否は「差別」 水戸地裁は訴え認めず [少考さん★]
- 【違法オンラインカジノ汚染】『吉本興業』芸人と社員の50人ほどが対象に…かつての『闇営業』のようになる可能性も懸念 [おっさん友の会★]
- 「女性をAEDで助けたら被害届」ABEMAの報道番組が波紋「BPOあったら瞬殺される」「訂正すべきでは」 [夜のけいちゃん★]
- 公務中に“部下とSEX”市長が認める ホテル代は税金から… 田川市😲 [861717324]
- 速報149ドル [907330772]
- 女の子「バリバリ財布キモイ」の現代版がコチラwwwwwww [856698234]
- 元ヤクザ「組を抜けて5年。真面目に働いた給与を受け取る銀行口座を作れないのはおかしいだろ」 裁判で訴えるも棄却される [485983549]
- 【悲報】斎藤元彦陣営のネット広報担当会社が投稿したnoteで騒然★469 [931948549]
- 日本人、日本で成功したら海外移住が黄金パターンとして定着してしまう… [819729701]