【保存・記録】ウェブアーカイブ総合 Page.01
■ このスレッドは過去ログ倉庫に格納されています
ウェブアーカイブ関連の話題を総合的に扱うスレです。
情報交換し合って貴重なインターネット遺産を後世に残しましょう。
Internet ArchiveなどのWebサービスだけでなく、wget・HTTrack・Heritrix等のツールやソフト、自作クローラの話題もOKです。
・関連リンク（Rock54回避のためピリオドをカンマに変更）
Wayback Machine
https://archive,org/
archive,today
https://archive,fo/
ウェブ魚拓
https://megalodon,jp/
Archive Team
https://archiveteam.org/
・関連スレ
Internet Archive総合 (web,archive,org) #2
http://mevius.5ch.net/test/read.cgi/esite/1475246713/
ウェブ魚拓 Part3
http://mevius.5ch.net/test/read.cgi/esite/1498902308/
【和塩】geocitiesスレ10【ジオシティーズ】
http://mevius.5ch.net/test/read.cgi/hosting/1554115546/
【ヤフー】Yahoo!ブログ【アーカイブ】
http://mevius.5ch.net/test/read.cgi/blog/1554380939/
・ジオシティーズでの失敗から学んだアーカイブにあたっての注意事項
1. 早めに行動しましょう
2. まずは既存のプロジェクトや遺産を探しましょう
3. 単独ではなく組織的に動きましょう
4. 呼びかけや情報共有を積極的に行いましょう Archiveteamがやってくれるなら、ノンアフィまとめサイトも一括で魚拓取ってほしい
記事数が1年で1万近くあるから手動じゃ無理だわ
http://himasoku1123.blogspot.com
http://nikisoku.blogspot.com 自動化してまとめ記事作ってるところもあるだろうし際限なさそう >>741
729です ありがとうございます
いま見聞伝の昔のサイト「KENBUNDEN2009」（ttp://kenbunden.net/wpmu/）のアーカイブをInternet Archiveで途中までとっているのですが
ttp://kenbunden.net/wpmu/blog/2010/03/14/%EF%BC%92%EF%BC%8E%E6%96%87%E8%8A%B8%EF%BC%88%E8%AA%AD%E6%9B%B8%EF%BC%89%E3%82%B5%E3%83%BC%E3%82%AF%E3%83%AB%E5%BA%A7%E8%AB%87%E4%BC%9A/
ttp://kenbunden.net/wpmu/blog/2010/03/14/%EF%BC%92%EF%BC%8E%E6%96%87%E8%8A%B8%EF%BC%88%E8%AA%AD%E6%9B%B8%EF%BC%89%E3%82%B5%E3%83%BC%E3%82%AF%E3%83%AB%E5%BA%A7%E8%AB%87%E4%BC%9A/
ttp://kenbunden.net/wpmu/blog/2010/03/15/%EF%BC%94%EF%BC%8E%E5%8F%96%E6%9D%90%E2%97%86%E6%B0%B8%E6%B1%9F%E6%9C%97%E5%85%88%E7%94%9F%EF%BC%88%E3%83%A9%E3%82%A4%E3%82%BF%E3%83%BC%EF%BC%89/
ttp://kenbunden.net/wpmu/?attachment_id=1097
ttp://kenbunden.net/wpmu/blog/2009/07/13/%E3%80%8C%E8%A1%97%E3%83%B2%E6%83%B3%E3%83%95%E3%80%8D/
ttp://kenbunden.net/wpmu/blog/2009/07/13/%E3%80%8C%E8%87%AA%E5%88%86%E4%BA%8B%E5%8C%96%E3%80%8D%E3%81%99%E3%82%8B%E3%80%82/
ttp://kenbunden.net/wpmu/?attachment_id=1068
ttp://kenbunden.net/wpmu/blog/2009/12/01/%E2%97%86intro-2/
ttp://kenbunden.net/wpmu/hiroyasu/2009/09/23/nins%E3%82%B7%E3%83%B3%E3%83%9D%E3%82%B8%E3%82%A6%E3%83%A0%E4%BA%8B%E5%89%8D%E5%8F%96%E6%9D%90%E6%9D%BE%E6%B2%A2%E5%85%88%E7%94%9F/
これらのページがURLに含まれる記号等のせいかきちんとアーカイブできません >>744です
上記のURLの内
ttp://kenbunden.net/wpmu/blog/2010/03/14/%EF%BC%92%EF%BC%8E%E6%96%87%E8%8A%B8%EF%BC%88%E8%AA%AD%E6%9B%B8%EF%BC%89%E3%82%B5%E3%83%BC%E3%82%AF%E3%83%AB%E5%BA%A7%E8%AB%87%E4%BC%9A/
ttp://kenbunden.net/wpmu/?attachment_id=1068
以外はアーカイブできました これより後だと
ttp://kenbunden.net/wpmu/blog/2009/12/01/%E2%97%86intro-2/
ttp://kenbunden.net/wpmu/blog/2009/07/13/%E8%99%B9%E3%81%AF%E9%BB%92%E3%81%84%EF%BC%81%EF%BC%9F/
ttp://kenbunden.net/wpmu/?attachment_id=1063/
ttp://kenbunden.net/wpmu/blog/2009/06/03/%E3%80%90%E7%95%AA%E5%A4%96%E7%B7%A8%E3%80%91%E3%80%8Enuovo-cinema-paradiso%E3%80%8F%EF%BC%88%E3%83%88%E3%83%AB%E3%83%8A%E3%83%88%E3%83%BC%E3%83%AC1989%EF%BC%89/
ttp://kenbunden.net/wpmu/blog/2009/05/12/%E5%89%8D%E6%9B%B8%E3%81%8D/
が時間を置いても今のところだめです >>744-745
Save Page Nowから保存しようとすると俺の環境でも出来なかったけど、
curl使って/save/に投げたら保存できた
?attachment_id=1063と?attachment_id=1068はNot Foundでページが自体が無いけど、
Save Page Nowで保存できたよ
取りこぼし無ければ俺が確認できたブログ記事118ページ全て保存できてるはず ツイセーブってアーカイヴ的な意味でTwitterの保存に使えるのかな エキサイトフレンズサービス
ttps://friends.excite.co.jp/notice/?type=info&no=172
サービス提供の終了 2022年4月27日（水）15時 ttps://ameblo.jp/imai-yuzo/entry-12716798529.html
今井ゆうぞうさんのブログが明後日の19時に閉鎖されるそうです ttps://shop.plaza.rakuten.co.jp/
店長の部屋Plus+は2022年1月をもって提供を終了致します。長きに渡りご愛読ありがとうございました。 スクウェア・エニックスの開発資料を管理するプロジェクト「SAVE」のセッションをレポート。ゲーム開発の過去を探ることで，未来につなげる
https://www.4gamer.net/games/999/G999905/20220126058/ 気色悪すぎるポエマー基地外婆
痛い妄想婆。芸能人のゴシップネタに顔文字で嘲笑い中傷しか少ししたら即消し。
自分にひたすら赤ポチ付け命懸け
周囲に青ポチ連打。
若ぶってる還暦近いニート婆
https://news.yahoo.co.jp/profile/id/FuFiWDuNeXn41agPfYcGqcw-/comments 「ウェブリブログサービス終了(2023/1)のお知らせ」
ttps://info.at.webry.info/202201/article_2.html TechCrunch Japanおよびエンガジェット日本版 終了のお知らせ
https://www.beboundless.jp/press/corporate-announcement-02-15-2022
これ誰かArchive Teamに連絡してもらえないかな
どちらも日本のITニュースサイトの草分け的なサイトで、過去記事が完全に無くなってしまうと結構な影響が出る >>756
TechCrunch Japanは現時点で3190ページまである
各20記事載ってるから計63800記事くらい
https://jp.techcrunch.com/page/3190/ エンガジェット日本版はハードル高そうだね
パッと見た感じだと動的なページ読み込みでmaxで最新の200記事くらいしか確認できない https://www.dead-link-checker.com/ja/
これに突っ込めばいけるんじゃ？
余計な文字や他のURLはサクラエディタの置換ツールで消せる 「ビジュアルブログサービス「g.o.a.t」サービス提供終了のお知らせ」
https://www.goat.at/information/20211124.html
2022年5月31日サービス提供終了だそう tweetsaveのサイトが消えてしまった…
https://tweetsave.com 見た限りTechCrunch Japanはほぼすべてのページが保存されてるから更新停止以降にページ一覧をアーカイブするだけでいけそうだけどそれで大丈夫だよな？ と思ったけど米国版にリダイレクトされてるから無理だ
結局日本のipでとらないといけない BLOGOS サービス終了のお知らせ
https://blogos.com/feature/blogos_close
サイトの公開を終了する2022年5月31日以降、編集部執筆のオリジナル記事など一部の記事のみlivedoor ニュースにアーカイブされ、その他の転載記事は閲覧することができなくなります。 【重要なお知らせ】teacup. byGMOのサービス終了につきまして(3月01日 14時00分)【重要なお知らせ】teacup. byGMOのサービス終了につきまして(3月01日 14時00分)
https://www.teacup.com/information/view?id=243
2022年8月1日（月）13:00にサービス終了らしい >>772です
すみません、記事タイトルを二重にコピペしているのに気づかず投稿してしまいました 各種の小さな掲示板が村社会のように乱立する時代じゃなく、
単一の巨大なSNSプラットフォームで緩やかに繋がる時代にシフトしたって事だろうね
5chもそのうち無くなるよ ArchiveTeamのdeathwatchにengadgetとTechCrunchが追加されてたが、進捗どうなってるかな
https://wiki.archiveteam.org/index.php/Deathwatch#2022 >>777
webcrowのURL収集ページがWikiに載っててたまげました・・・ 明らかに荒らすのが目的の怪しい書き込みが勢いあるスレに定期的に湧いたりしてるしね5ch
ぶっちゃけツイッターは都合・耳障りの悪い書き込みは通報されてるから外面のいい書き込みばっかで好きじゃない
フォロワー数200はないと当たらない抽選リツイート広告もうざいけど 13 番組の途中ですがアフィサイトへの転載は禁止です (ﾜｯﾁｮｲ 0222-Gxrt)[] 2022/03/18(金) 10:12:48.10 ID:WOefpNSE0
過去ログも無い
フラッシュゲームも無い
画像映像すべてDeleted表示
個人サイトは404NOTFOUND
便利な新サービスができてもすぐ終了
最新のものが瞬間的にしか存在しないのが2010年代のインターネットであった
検索結果がアフィまみれなのが2010年代のインターネットであった
【電子書籍】Microsoft Storeから電子書籍が削除。購入書籍は全額返金
http://egg.5ch.net/test/read.cgi/bizplus/1554275673/
Google Play Music、サービス終了。8月末から音楽のダウンロードが不可に [434464885]
https://leia.5ch.net/test/read.cgi/poverty/1596600303/
【IT】Yahoo!ブログがサービス終了--黎明期のサービス続々終了
http://egg.5ch.net/test/read.cgi/bizplus/1551370150/
infoseekの無料HPサービスを使ってる全HPが11/1の2:00限りで見れなくなるぞー ネット遺産消滅 ★３
http://hato.5ch.net/test/read.cgi/news/1288538812/
ニフティ、個人などのホームページ14万件が1カ月後に自動消滅、8割以上が放置されたまま [無断転載禁止]c2ch.net [594632409]
http://hitomi.5ch.net/test/read.cgi/poverty/1472451809/
【lycos】ライコス消滅まであと１日【infoseek】
http://news19.5ch.net/test/read.cgi/news/1062256363/
【悲報】インターネットがまとめサイトのせいでどんどん使い辛くなってると話題に
http://leia.2ch.net/test/read.cgi/poverty/1538296178/
【お知らせ】Yahoo!ジオシティーズは、2019年3月末をもちましてサービスを終了させていただくこととなりました★2
http://asahi.5ch.net/test/read.cgi/newsplus/1538426761/
個人サイトってもう完全に消えたよな 今は検索に引っかかるようにしたブログか、要件だけ伝える簡素な会社HPか、どちらかしかない [998357762]
https://leia.5ch.net/test/read.cgi/poverty/1541513802/
魔法のiらんど、ホームページ・ブログサービス終了 小説投稿サイトにリニューアル [495152168]
https://leia.5ch.net/test/read.cgi/poverty/1579211303/
【悲報】レンタル掲示板のteacup.が8月1日でサービス終了 25年の歴史に幕 [632443795]
https://hayabusa9.5ch.net/test/read.cgi/news/1646374116/
インターネットがつまらなくなった理由とは？ スマホキッズの流入、アフィキッズの流入、飛び交うネットスラング・・ [175746563]
http://leia.5ch.net/test/read.cgi/poverty/1538426531/
いつから日本のインターネットってこんなにつまらなくなったんだろうな [377388547]
http://leia.2ch.net/test/read.cgi/poverty/1513348977/
短い情報を数ページに渡って読ませた挙げ句、最後に「いかがでしたか」って書いてあるまとめサイトのゴミっぷり [566475398]
http://leia.5ch.net/test/read.cgi/poverty/1552338977/
15年前のお前ら「一度ネットで炎上したら一生残るずwww」ほとんど残ってない件 [811796219]
https://leia.5ch.net/test/read.cgi/poverty/1617362844/
【悲報】「ネットの情報は永遠に残る」が完全に嘘だったことが判明。10年前のWebの情報は8割、20年前は99％が消失 [976470219]
http://leia.5ch.net/test/read.cgi/poverty/1538708384/ 【重要】サービス終了のお知らせ
http://2style.net/support-end.html
「2Style.net無料ホームページサービス/無料レンタルサーバーホスティング」が一部サービスを除き2022年3月31日で終了 Internet Archive
@internetarchive
·15時間
📣 ATTENTION: PG&E our local power company is implementing a planned power outage tomorrow between approx. 7:00-7:30 AM Pacific, near one of our main data centers.
Please expect some disruptions in service. Thank you for your patience. Internet Archive
@internetarchive
ATTENTION: PG&E, our local power company, is implementing a planned power outage today near one of our datacenters.
They now report that they will be done before 2pm PT.
Please expect some disruptions in service. Thank you for your patience. >>782です
まだ今の時点では「2Style.net」のページが閲覧できます http://web.archive.org/web/20010302070753/http://www.senpre.com/
のFlashの方で再生されていたmusic.swfファイルがどうしても欲しいのですが、
どこにも見つかりません
どこかにないでしょうか
http://web.archive.org/web/20010303030055oe_/http://www.senpre.com/music.swf 2002年頃に閉鎖された趣味系の個人サイトがWayback Machineに記録されてたんだけど、
15個くらいあるページ（html）のうち1つだけがアーカイブされてなかった・・・残念だ
なんでこのページだけ？って気持ちはあるけど、まぁそういうものだと思って諦めるしかないよね
どこか他のアーカイバで保存されてないかと探したけど案の定なさそう
Wayback Machineで見つからなければジエンドか Waybackになくて他にあったことはほとんどないなぁ確かに ログイン必須なとことかInternet Archiveが保存から除外してるサイトだと
Wayback Machineにはなく他だとあるってことがよくあるけど
そういうの別に関係ないサイトでWayback Machineにはなく他だとあるっていうのは言われてみれば今までなかったかもなー
あるにはあるんだろうけど 2000年くらいまでのネットは今とはだいぶ空気違くて、時々懐かしくなって見たくなるんだよな
素朴だけど良いサイトいっぱいあった 終了するサービスを時系列でまとめてみました
「g.o.a.t」「BLOGOS」 2022年5月31日→
「teacup.」 2022年8月1日（月）13:00→
「ウェブリブログ」 2023年1月31日（2022年1月18日以降新規記事投稿のないブログは2022年12月1日に閲覧終了） 「熱量と情報量が凄まじい個人サイトよ、いずこに…」 2000年代にたくさんあった個人ブログ、テキストサイトが消えた理由
https://news.careerconnection.jp/entame/134251/?amp=1 >>776
「SNSはネット掲示板に代わるもの」というには心もとないのになぁ
ネット掲示板は影響力とか肩書きとか関係なしに交流とか情報発信ができるが、SNSはそうはいかない
ひたすらひとりごとしてるだけならまだしも、誰かしらに見てもらいたい書き込みだと不便 SNSはネタになりそうな作話で大量のレスポンスを釣って、
「バズったので～」って宣伝するいいね乞食がマジでキモ過ぎて無理
有名人が実名晒して宣伝してたBlogを、誰でも簡単に見てもらえるようにした仕組みだけど、
企業広告じゃない拙劣で低俗な「広告」が溢れすぎてて話にならない
動画もニートが金儲けのために必死でアップしてるだけだし
掲示板は個人ユーザーが書き込んでも原則利益に繋がらない仕組みなのが健全
ステマはあるけど >>796
そもそもSNSって中華とかにある言論統制あるじゃん
ビッグネームに否定的なレスすると、粗探し通報されまくってアカ停止
片面提示大好きの愚民向け 昔のネットはよかったなぁ
今と違って消費・消耗するような場ではなかった
懐古主義とか嫌いなはずなのに、こんなふうにノスタルジーに浸るようになるとは どなたかアーカイブお願いします
「玄人志向」のサポート掲示板が終了へ、15年の歴史に幕 閉鎖後は過去の投稿も閲覧不可に
https://www.itmedia.co.jp/news/articles/2205/11/news124.html >>799
Archive Teamに相談してみては？
少なくとも俺は大規模アーカイブするソフトとか使ってなく、webアーカイブという概念への貢献度の低い一利用者にすぎないため特に貢献できない… >>799
12日に誰かがSPNでたくさんのページを保存してる
抜けてるのだけやればいいよ こういうのって企業は平気と閉鎖するけど、ブランド戦略としては悪手じゃないのか
掲示板じゃないけど、何十年も前の自社製品の取説とか公開し続けてる企業ってすごい好印象だわ >>794
当時はブログパーツがたくさんあって、これが良かったんだがなあ…。しくしく。 元記事(Taiwan News)はInternet Archiveでも保存されてるのに何故Ghost Archiveを紹介したんだろうか gigazineはInternet Archive弾いてるし、嫌いなんじゃね
知らんけど 今年だけで既に9本の記事にWayback MachineのURL貼ってるな、GIGAZINEさんは。
右手でアーカイブURLを貼りながら、左手ではブルースター・ケールに中指突き立てて削除要請という絵面。 >>808
最近まではアーカイブ出来てたんだけどね
noteみたいに特に何かあったわけでもないのに不思議だ 正直最近のGigazineは政治的偏りが出てきてるように思うから外的な圧力があるのか保存されると都合が悪いのかってところだろう IAにアーカイブしないでウェブ魚拓使ってる人って何が目的なのか気になる
消される確率や開示リスクを考えたら何もメリットないと思うんだけど 魚拓って検索するとそれが最初に出てくるからな
それしか知らないんだろう 山上のツイート消えちゃったのか
ツイッターってWayback Machineで取れるんだっけ？ 今更だけど、teacup.の掲示板をSaveする際、掲示板の2ページ以降のURLの末尾に;や/を入れないと、「次のページ》」などのリンクが繋がらなくなるので、Tipsポイント。
例:
「8038.teacup.com/muhihi/bbs?page=2&」でURLを指定してSaveすると
「8038.teacup.com/muhihi/bbs?page=2」で保存されて、閲覧時3ページ目以降のリンクが切れるので、
「8038.teacup.com/muhihi/bbs?page=2&;」と指定する必要がある。 teacup.の掲示板やブログが、NAVERまとめやGeoCitiesの時みたいに有志によって保存されんのね…。
無念あとは頼む (他力本願) どなたかよろしくお願いいたします...
> 京都大学オープンコースウェア（OCW）の閉鎖について
> 京都大学高等教育研究開発推進センターは2022年9月末に廃止されることになりました。京都大学オープンコースウェア（OCW）も、残念ながら9月中旬以降にサイトを閉鎖することになりました。2005年以来、京都大学OCWをご利用いただき誠にありがとうございました。
https://ocw.kyoto-u.ac.jp/news/6/ ライセンスはCC BY-NC-SAなので、アーカイブ及び再配布は認められるようです
https://ocw.kyoto-u.ac.jp/guideline/#ref 現状だと5ch-ranking.comが取得してるものはそれをアーカイブすることで一応可能だが
ここがキャッシュしてないスレがお手上げ状態 .ph/ で保存したつもりのエラーページが破棄されてるのか出てこなくなった ghostはノロノロ待たせてエラー吐くようになった。
成仏かなー。 ［CEDEC 2022］「復刻できないあのゲームを、合法的にプレイできるようにするために、今できること」レポート。キーワードは裁定制度と納本制度
https://www.4gamer.net/games/999/G999905/20220826060/
［CEDEC 2022］スクウェア・エニックスの過去資産サルベージプロジェクトの“今”が語られた「実践！資料保存活動の現場編」聴講レポート
https://www.4gamer.net/games/999/G999905/20220826086/
［CEDEC 2022］ゲームは大きな財産。ゲーム展示や開発資料の活用方法を，多様な見地から俯瞰する
https://www.4gamer.net/games/999/G999905/20220826043/ この運動をしてる人らの興味関心がそうなのか、古いゲームにしか目を向けられてないが、
ソシャゲも頼むわ
雨後の筍のごとく出てくるのにサ終で何も残らないんよ >>826
ブラウザゲーで公開されてるファイルの一部はたまにアーカイブに送ってるが
flashゲーみたいに動作する状態での保存はできんからな
JAVAのですら内部で呼び出すファイルのアドレスが書き換わってしまうためにそのままでは動かん ソシャゲがソシャゲであるためにはサーバ側の処理が不可欠
サービスが終了してるならもう何も出来ない そのサーバー側の処理も含めてどうにかスタンドアローン化するか、
それが非現実的な場合は動作する状態でなくても、
静的な状態でも良いから何かしらのアーカイブ化をしてほしいわけだ 海外だとオフライン版とか勝手に作られてるし、
単にスキルないだけ 1万人より100万人、100万人よりも1億人というふうにファンの裾野が広ければ上位個体が発生するし、野良サーバーも生まれ、語り部サーバーになる。 そんなにURがヤバイ性能だったら3周年まで実装するのは待てとあれほど・・・。
なぜ周年前に実装した?
前年の8月のフェス限やパーティ限もそうだったし。 >>833の書き込みは間違いでした。
失礼しました。 NY市の「9/11トリビュート・ミュージアム」が恒久的に閉鎖 コロナ禍の財政難で
https://www.cnn.co.jp/amp/article/35192027.html
>発表によれば展示品や記録映像の大半は、ニューヨーク州オルバニーにあるニューヨーク州博物館に移される。
>ただミュージアムのウェブサイト自体は今後もオンライン上で存続する。↓
https://911tributemuseum.org アトラスがサ終した『真・女神転生』MMOを復活させたファンを提訴…「取り返しのつかない損害を与えている」と主張
https://www.gamespark.jp/article/2022/09/27/122858.html teacup.掲示板 何とかしてでも自動でクロールしてIAに保存すればよかったと思ってる。
そんな技術自分には無いけど後悔してる。 こんなのあったんか・・・見たかったとこはリンク切れのアーカイブやった残念 >>839
インターネットアーカイブにはデータ渡してあるのかな ■ このスレッドは過去ログ倉庫に格納されています
