【保存・記録】ウェブアーカイブ総合 Page.02

**192.168.0.774** · 2023/11/21(火) 07:23:34.80

ウェブアーカイブ関連の話題を総合的に扱うスレです。
情報交換し合って貴重なインターネット遺産を後世に残しましょう。
Internet ArchiveなどのWebサービスだけでなく、wget・HTTrack・Heritrix等のツールやソフト、自作クローラの話題もOKです。

・関連リンク（Rock54回避のためピリオドをカンマに変更）
Wayback Machine
https://archive,org/
archive,today
https://archive,fo/
ウェブ魚拓
https://megalodon,jp/
Archive Team
https://archiveteam.org/

・関連スレ
Internet Archive総合 (web,archive,org) #2
https://mevius.5ch.net/test/read.cgi/esite/1690495133/
ウェブ魚拓 Part3
https://mevius.5ch.net/test/read.cgi/esite/1498902308/
【和塩】geocitiesスレ10【ジオシティーズ】
https://mevius.5ch.net/test/read.cgi/hosting/1554115546/
【ヤフー】Yahoo!ブログ【アーカイブ】
https://mevius.5ch.net/test/read.cgi/blog/1554380939/

・ジオシティーズでの失敗から学んだアーカイブにあたっての注意事項
1. 早めに行動しましょう
2. まずは既存のプロジェクトや遺産を探しましょう
3. 単独ではなく組織的に動きましょう
4. 呼びかけや情報共有を積極的に行いましょう

**998** · 2023/11/22(水) 11:01:01.11

勝手に次スレ立てたなら、前スレのURLぐらい貼れよ
https://mevius.5ch.net/test/read.cgi/internet/1554553882/

**998** · 2023/11/22(水) 11:13:01.57

>>1の関連リンクや関連スレのリンク先の状況確認もしてなさそうだし

**998** · 2023/11/22(水) 11:30:01.04

前スレで、残り書き込めれるレス数が少ないのに悪口で埋めるのかよ。阿保らしい

**192.168.0.774** · 2023/11/22(水) 12:17:26.13

>>2
うるせえよ死ねゴミ

**192.168.0.774** · 2023/11/22(水) 12:58:35.19

次スレどうする云々は早めに議論始めないと大抵こうなるんだよね。
5CH自体、人減ったからそういうのを仕切れる人も減った。

**192.168.0.774** · 2023/11/22(水) 13:08:04.66

>>3
リンク先の確認はしてる
文句言う前にお前こそ確認しろ

**192.168.0.774** · 2023/11/22(水) 20:45:03.42

例のスレを私物化してるというかひたすら日記帳にしてた句読点空改行マンは正直叩かれても仕方ないかと

**192.168.0.774** · 2023/11/23(木) 16:21:52.04

次スレ立ったんだし別になんでも良いでしょ
仮にこのスレの次スレが立つなら>>950が立てれば良いさ
テンプレは使い回しして

**192.168.0.774** · 2023/11/29(水) 19:55:45.97

今さらだがtok2の無料プラン6月に死んでたのね

**192.168.0.774** · 2023/11/29(水) 20:05:03.99

長期で見たらどのアーカイバが飛ぶかわからない砂上の楼閣感がある

**192.168.0.774** · 2023/11/30(木) 15:45:33.23

信用度で言ったら
インターネットアーカイブ>>>>>>>>>today>その他
って感じだしな

特に運営元が分からない奴はいつ飛んでもおかしくない

**192.168.0.774** · 2023/12/01(金) 20:55:06.14

.orgで連続で弾かれた内部的な仕様変更だろうか
"Not Found
The requested URL was not found on the server. If you entered the URL manually please check your spelling and try again."

**192.168.0.774** · 2023/12/01(金) 21:02:28.18

Windows版FireFox、Chrome、BraveとSafariで同じ症状

**192.168.0.774** · 2023/12/01(金) 23:14:24.37

IAのスレでもその話題出てるけどIAの不具合ぽい

**192.168.0.774** · 2023/12/06(水) 10:23:22.54

archive.is
日本時間今朝10時7分にサーバ証明書期限切れ、更新されてない

**192.168.0.774** · 2023/12/12(火) 19:22:42.21

archive todayで気軽にアーカイブ化できるようなショートカットとかないですか？

**192.168.0.774** · 2023/12/13(水) 12:39:45.28

公式にブックマークレットあったはずだけど使えなくなったのか？

**192.168.0.774** · 2023/12/18(月) 14:32:47.54

ブックマークレット見当たらないんだけどどこにある？

**192.168.0.774** · 2023/12/18(月) 22:09:24.58

>>19
確かにそんなものがあったなぁ。
https://web.archive.org/web/20191022034909/archive.is/

archive.today で定期的にアーカイブさせるスクリプトを動かしていたことがあるけど、
ブックマークレットが行っていたような「保存したい URL を付けて送信するだけ」という方法が
何年か前に受け付けられなくなり、http://archive.is/ のトップページでトークン (submitid) を
得ることを要求するようになった。
ブックマークレットが掲載されなくなったのはその頃。

**192.168.0.774** · 2023/12/18(月) 23:02:56.83

今も一応第三者が作ってGithubに上げてるブックマークレットならちゃんと今見てるページのワンポチ魚拓取得出来るよ
トップページ一回経由するやつ

**192.168.0.774** · 2023/12/19(火) 14:10:59.19

>>21
ま？探してくるわ

**192.168.0.774** · 2023/12/28(木) 15:22:56.59

archive.today
今朝、運良く取得できたけど、welcome to nginx病・・・
しかも一度出ると再アクセスしても接続がタイムアウトして繋がらなくなる・・・
回避方法あったら教えて

**192.168.0.774** · 2023/12/28(木) 15:53:07.15

>>23
見た感じ archive.today の応答がかなり悪くなってるみたいだけど
archive.is とか archive.md とか archive.li とか、リダイレクトの生じない名前なら
サクサク返って来るんだよね

**192.168.0.774** · 2023/12/29(金) 16:14:00.57

今日もarchive.todayでWelcome to nginx!になって取得できない・・・
取得するコツってないの？

**192.168.0.774** · 2023/12/29(金) 16:24:41.89

>>25
あるよｗ

**192.168.0.774** · 2023/12/29(金) 16:30:00.41

>>5
お前みたいな人はボランティアとかに向いていないから、ここのスレとかに来ない方が良いんだけどな。

>>8
ここ匿名なのに、「日記帳にしてた人」と「指摘した人」同じに見える能力があるんだな。すげえな。

もし有事があっても朝鮮人の所為にするなよ。

**192.168.0.774** · 2023/12/29(金) 16:44:03.51

>>7
関連スレの「#2」の部分は直さなかったのかｗ　#5なのに

**192.168.0.774** · 2023/12/29(金) 16:53:00.74

まあ、>>5 >7 >8はもう居ないだろうけど。

**192.168.0.774** · 2023/12/29(金) 21:39:19.78

スレを日記帳にしてた連投句読点おじさん帰ってきちゃったじゃん…

**192.168.0.774** · 2024/01/02(火) 12:32:26.24

質問です
このサイトをそのままの形で落としたいのですが
https://goodsmileshop.com/ja/
HTTrackでやったら、商品ページまで落とせず終わったり商品の画像が表示されません

そこでwgetで
wget -m -p -E -k -np をつけてやってみました。コマンドはよく分かりませんがネットでサイトそのまま再現
で検索したらこのコマンドを使えと記載がありました
まだ終わってませんがindexを覗いてみたら、カテゴリページを延々とダウンロードしてるようで
商品ページはまだで、途中ですがやっぱり画像が表示されてません
またいつまで経っても終わりません

画像が表示されないのは、表示方法にjavascriptとかを使っているからなんでしょうか
放置してダウンロードが終了すれば、きちんと表示されるんでしょうか

**192.168.0.774** · 2024/01/02(火) 16:22:32.88

>>31
スレタイ
❌ ローカルアーカイブ総合
⭕ ウェブアーカイブ総合

**192.168.0.774** · 2024/01/02(火) 19:16:28.75

wget・HTTrack・Heritrix等のツールやソフト、自作クローラの話題もOKです。

って書かれてたんで来ちゃいました。すみません
wgetの使い方に詳しい方がいる板ってどのあたりなんでしょうかね

**192.168.0.774** · 2024/01/09(火) 19:48:58.47

最近インターネットアーカイブで見れる閉鎖サイトを丸々コピーしてる攻略サイトが増えてるわ
代表的なのはこれ
https://xneo.jp/
https://kouryaku7.com/

**192.168.0.774** · 2024/01/22(月) 15:30:21.91

スラド終了のお知らせ
https://srad.jp/story/24/01/22/0311225/

**192.168.0.774** · 2024/01/22(月) 15:33:31.38

スラドの保存を依頼しに来たが、既に書かれてた
1月いっぱいで閉鎖との事なので、技術を持ってる方がいたらWayback Machineへの保存をお願いします

**192.168.0.774** · 2024/02/01(木) 03:41:51.12

>>31
亀レスだけど、落とそうとしてるファイルが多すぎる&サイトにJavaScriptが使われてる、の両方では
でかいサイトをwgetでまともにクロールするなら1週間くらい置いといた方がいい
あと最近のサイトは大概JavaScriptを多用してるから、Heritrixを使った方が楽かもしれん

参考にしたというのは多分このサイトだな
https://tex2e.github.io/blog/shell/wget-entire-website

あと>>32は間違ってる、ローカルアーカイブもれっきとしたWebアーカイブの一種だよ
>>1にもちゃんとwgetも含むと書いてあるし

**192.168.0.774** · 2024/02/04(日) 23:33:32.14

採択