Internet Archive総合 (web.archive.org) #6

**名無しさん＠お腹いっぱい。** · 2025/01/27(月) 22:33:22.00

こんな辺境の地でうだうだ言ってないでお前がアーカイブしろ
お前と違って真面目に保存活動してる奴はいるぞ
https://archive.ragtag.moe/

>>104
一括確認はその方法以外は無い・・・はず

**名無しさん＠お腹いっぱい。** · 2025/01/27(月) 22:33:29.35

>>106
自分が関わっている領域のアーカイブは機械化もしながら自分てやってるんだよ
ただお前の面倒まで見るつもりは無い

**名無しさん＠お腹いっぱい。** · 2025/01/27(月) 23:09:10.13

>>104
https://archive.org/services/wayback-gsheets/
いつもこれでチェックして保存されてないやつspnに投入してる

**名無しさん＠お腹いっぱい。** · 2025/01/28(火) 16:59:46.82

>>109 そうやって皆さんは私に丸投げするのか？
それが保存活動の重要性を軽視したり、「どうせ誰かが保存しているだろう」といった心理が蔓延したりしている証拠だ。
>>106 どうしても嫌なら無理して協力しなくても結構です。

**名無しさん＠お腹いっぱい。** · 2025/01/28(火) 18:41:19.18

>>112自身が精力的に保存をしているのに
>>97などは「112が自分では何もせず全部丸投げしている」という認識
全然話が噛み合ってない

**名無しさん＠お腹いっぱい。** · 2025/01/28(火) 19:33:49.32

じゃあ聞くが昨日と今日でいくつ保存したんだ？

**名無しさん＠お腹いっぱい。** · 2025/01/28(火) 19:57:19.78

議論の場所が間違っているので、ホロライブ総合スレで言ってみたほうがいいんじゃないかな？

**名無しさん＠お腹いっぱい。** · 2025/01/28(火) 20:12:33.99

>>114 今日は今のところ5本くらい。

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 00:03:14.89

ホロライブスレで相手されないからこっち書いてるの？

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 00:11:55.39

私に自分が早く保存しろとか言ってる人の皆さんはみんな私に全部押し付けるの？
仕事や就寝の都合で早くチェックできない時があるのに？
だから保存活動の重要性を軽視したり、「どうせ誰かが保存しているだろう」といった心理が蔓延したりしているってことですか。
そういう考えだから保存する必然性を感じないって事だろう？

ホロライブだけではありません。レオンチャンネルなど他の動画もそうです。

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 00:24:22.55

ホンモノの人っぽすぎて触れづらい

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 06:01:48.85

Yahoo!ニュースでそこそこ見る中国人みたいな奴で草
最近だと新婚旅行で来日した痴漢ゴブリン

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 21:03:10.92

>>118
必要性を感じない←答え出てるじゃないか
その必要性をより具体的に説明する方法をもってこい
それがない限り作業を押し付けてるのは君の方だし
現状全く必要性を感じないし
なぜここで喚くのかもわからない

必要だと思ったら個人でやればいい
仕事で見れないならサーバーでも作ってジョブ登録させたりして自動保存しろよ
これ以上Vのイメージ下げないでほしい

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 21:04:48.87

VならVスレの方に書けよ
そっちの方が住民の協力も得られると思うけど

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 21:41:03.87

レオンチャンネルも...
いらんな（）
そもそも歴史的価値がある動画なんてそうそうないだろうし

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 22:23:58.88

話し変えるけど今日からoutlinksの取得数ごっそり減ってない？

**名無しさん＠お腹いっぱい。** · 2025/01/29(水) 23:19:19.57

>>124
減ってる
確か 100 件くらいまでは拾えてたはずが今は 10 件だけ

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 00:13:29.51

>>111
ありがとうございます！

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 00:40:12.68

ページ画像なんかspnじゃ全部取れないから仕方なく黙々と手作業で確認してるけどやるならそれくらいの気概でやれって感じ

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 00:41:06.57

spn △
outlinks 〇

spnだけじゃ画像取り切れないサイトもあるから間違いではない

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 00:49:46.23

スクレイピングで取得したURLをSPNで全部処理させて
間接的にOutlinksの処理させるスクリプトでアーカイブしてるんだけど
ちゃんと記録されてんのかなこれ

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 01:02:11.01

いつの間にかdaily_captures_limitが10000になってた
outlinks上限が10件になったりとかなり絞ってるな

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 14:14:58.28

スラド、受け入れ先が決まる前に死亡したかぁ
https://web.archive.org/web/20250130051154/srad.jp/

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 18:18:15.73

todayいいよtoday

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 19:11:43.34

ボット除け入ってるのは論外

**名無しさん＠お腹いっぱい。** · 2025/01/30(木) 20:32:35.64

そんなぁ

**名無しさん＠お腹いっぱい。** · 2025/01/31(金) 02:25:19.71

>>131
うぉっ、これは大きいな…

**名無しさん＠お腹いっぱい。** · 2025/02/01(土) 14:53:03.33

>>121　みんな自分勝手すぎる。
自分が良ければそれでいいのか。

**名無しさん＠お腹いっぱい。** · 2025/02/01(土) 15:01:32.48

失せろ

**名無しさん＠お腹いっぱい。** · 2025/02/01(土) 17:37:41.68

スラド戻った。
そして雑談用トピックも1月28日付けで立ってる

**名無しさん＠お腹いっぱい。** · 2025/02/01(土) 18:47:25.57

iPhoneのお気に入りに保存してるURL
いつの間にかリンク切れ多数
Webページの寿命って10年行くか行かないかくらいじゃないか？

**名無しさん＠お腹いっぱい。** · 2025/02/01(土) 19:25:28.46

daily_captures_limit が 40000 に戻った
outlinks の上限はおそらく 75

代行 · 2025/02/02(日) 00:44:22.51

【本文】
『Save outlinks』の機能使いたいんですけど、ログインしてるのに「Sign in to use extra features:」と表示されてそこのボタンを押すと、入力した保存したいURLが外れて保存が出来ないままなのですが、どうすればいいのでしょうか？

**名無しさん＠お腹いっぱい。** · 2025/02/02(日) 02:41:16.13

なることあるみたいねー
Firefox で生挿入しているときは専用オプション出るので支障無かったけど
Tor Browser で試すとログインできて右上にユーザ名も出てるのに Save error pages だけ
アカウントは同じ、もしかして回線別の規制が始まった?

**名無しさん＠お腹いっぱい。** · 2025/02/02(日) 12:46:14.84

>>141
俺もなってる

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 12:21:24.62

You have already reached the limit of active Save Page Now sessions. Please wait for a minute and then try again.

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 12:30:17.41

wait for a minute というのが字面通りなんだな
時計の秒針が進んで 0 秒を過ぎるのを待てばよい

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 18:04:00.51

テスト

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 18:05:31.69

みんな保存活動の重要性を軽視したり、「どうせ誰かが保存しているだろう」といった心理が蔓延したりしすぎ。
アーカイブ保存が遅過ぎるケースがかなり増えていますのに、どうして危機感がないんですかね？
私がしつこいのは、みんな動画が公開されてすぐにチェックしてもアーカイブ保存は行わず、みんなアーカイブ保存をするのが遅いからです。
何か問題でも？

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 18:15:58.01

と、割れ厨がｸﾚｸﾚ音頭を躍っており

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 18:33:52.53

>>145
サーバーの時計ってそんなぴったり合ってるものなの？

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 19:26:49.79

ここにいる連中はVチューバーに1ミリも興味ない
お前に協力する義理もない
もう来ないでね

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 19:49:23.10

へえ、そんな香ばしいことになってたのか

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 19:54:10.54

>>150 お前ら本当に軽視しすぎ。
本当は初期データなんかどうでも良いと思ってんだろ。
その危機感の無さがアーカイブ保存の遅延を招いた結果だ。

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 19:57:37.33

この人こわい
俺に安価つけないでよ

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 20:02:38.44

>>149
電波時計を横に置いて手作業で連続アーカイブを掛けたりすることがあるけど
少なくとも 1 秒くらいの精度では合っていると思うね

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 20:02:47.15

保存を決意する前のお前がまさに
保存活動の重要性を軽視して、
「どうせ誰かが保存しているだろう」といった心理
だったわけだがw

**名無しさん＠お腹いっぱい。** · 2025/02/04(火) 21:08:02.76

ここは保存活動スレじゃないからね
Youtube板に専用スレ立てて言ったほうがいいね

**名無しさん＠お腹いっぱい。** · 2025/02/05(水) 02:37:53.50

みんながかまうから日本語あやしい中国人居座ってて草
ホロライブの桐生ココは中国の荒らしによって理不尽な引退に追い込まれたらしいっすね(検索結果でしか知らない)
中国人に好かれるvかわいそう

**名無しさん＠お腹いっぱい。** · 2025/02/05(水) 07:35:01.64

もうくんな

**名無しさん＠お腹いっぱい。** · 2025/02/05(水) 11:54:17.20

Vに興味なければただのゴミでしかないのに協力するわけない

**名無しさん＠お腹いっぱい。** · 2025/02/05(水) 12:58:03.32

ファンを装った競合弱小事務所の関係者だったりして

**名無しさん＠お腹いっぱい。** · 2025/02/05(水) 17:54:54.72

outlinksのチェックボックス復活したけど使う用事無いから使えるかは未確認

**名無しさん＠お腹いっぱい。** · 2025/02/06(木) 16:39:36.61

APIドキュメント見る限り一つのURLに使う時間は2分が上限らしいけど
ギガバイト級のファイルとか絶対に2分超えてると思うんだがな
まぁドキュメントは割とガバガバだから当てにならんと言えばそれまでだけども

**名無しさん＠お腹いっぱい。** · 2025/02/06(木) 18:55:42.60

Job status JSON の duration_sec を見てると確か 300 秒か 360 秒は行ってた気がする

**名無しさん＠お腹いっぱい。** · 2025/02/07(金) 22:16:47.65

https://www.youtube.com/watch?v=uBFTCK1EzM4
上記のURLが上がったのですぐにアーカイブ保存しようとしたらサーバーの負荷ですぐにアーカイブ保存が出来ない状態になってる・・・。
この状態では公開から10分以内のデータがどうやってもアーカイブ保存できないぞ。改善されるまで待つしかないか。

**名無しさん＠お腹いっぱい。** · 2025/02/07(金) 22:18:39.90

>> 156 分かった。

>>159 お前にゴミ呼ばわりされる筋合いはない。どうしても利用者のことをゴミ呼ばわりするならお前も5ちゃんねる全体から出て行ってもらうぞ。

**名無しさん＠お腹いっぱい。** · 2025/02/07(金) 23:23:52.46

１人で言ってろ

**名無しさん＠お腹いっぱい。** · 2025/02/07(金) 23:56:45.51

ゴミ呼ばわりはさすがにひどいわこんなのと一緒にしたらゴミに失礼だろ

**名無しさん＠お腹いっぱい。** · 2025/02/08(土) 07:50:08.72

>>167
たしかに
ゴミはリサイクルされたり熱回収されるけど
どっかのよくわかんない人は迷惑しかかけないからなぁ…

**名無しさん＠お腹いっぱい。** · 2025/02/09(日) 01:57:26.94

ログイン状態なのにoutlinksまた使えなくなった

**名無しさん＠お腹いっぱい。** · 2025/02/09(日) 23:31:20.26

outlinksが消えたり復活したりを繰り返している

**名無しさん＠お腹いっぱい。** · 2025/02/11(火) 02:29:43.50

ここずっと調子悪いな
ろくに使えない

**名無しさん＠お腹いっぱい。** · 2025/02/11(火) 09:48:37.07

実際問題どの程度寄付で動かされてんのかね？
寄付なかったらいずれは100%終わるだろうし

**名無しさん＠お腹いっぱい。** · 2025/02/11(火) 14:37:59.04

俺はちょこちょこ寄付してるよ
別に大人だから1000円くらい大したことないし
日常的に使ってるならそれくらい出してやれって
wikipediaもな。

**名無しさん＠お腹いっぱい。** · 2025/02/11(火) 17:33:19.06

みんな金持ちだな

**名無しさん＠お腹いっぱい。** · 2025/02/11(火) 17:51:13.54

出世払いで

**名無しさん＠お腹いっぱい。** · 2025/02/15(土) 12:15:13.49

もしかしてマイナビニュースの画像、手動で一枚一枚保存しないとダメなんか

**名無しさん＠お腹いっぱい。** · 2025/02/15(土) 18:03:03.98

寄附控除利かないから501(C)(3)のあるアの国に任せよう

**名無しさん＠お腹いっぱい。** · 2025/02/16(日) 17:19:34.23

アルゾン終了すんのか

**名無しさん＠お腹いっぱい。** · 2025/02/18(火) 19:44:48.61

追い、海外ニキ！アーカイブチーム何やってんだよ💢

**名無しさん＠お腹いっぱい。** · 2025/02/18(火) 19:50:57.71

うるせえ！ちんぽこ見せろ!!

**名無しさん＠お腹いっぱい。** · 2025/02/18(火) 22:14:51.59

アーカイブチームとか海外ニキとかが利用者がすぐさま迅速に対応しないし、アーカイブ保存の遅延が続いてるからだよ💢
これでは不便じゃないか。

>>180 うるさいのはお前だ。ちんぽことか言うなら出て行け。お前にコメントする資格はない。

**名無しさん＠お腹いっぱい。** · 2025/02/18(火) 22:29:40.41

「アーカイブチーム」ってのを NG ワードに追加すれば良いのだな

**名無しさん＠お腹いっぱい。** · 2025/02/19(水) 00:01:07.81

キチガイまだ居たのか

**名無しさん＠お腹いっぱい。** · 2025/02/19(水) 09:01:24.58

次スレからワッチョイかどんぐりほしい

**名無しさん＠お腹いっぱい。** · 2025/02/19(水) 16:14:16.89

ここで言うなよ邪魔くさいなぁ
scで壁打ちしてなよ…

**名無しさん＠お腹いっぱい。** · 2025/02/21(金) 11:19:45.86

うんこ！

**名無しさん＠お腹いっぱい。** · 2025/02/23(日) 13:36:03.59

Save Page Now API は生きてるけどブラウザでは全く使えんな
上の黒いバーが表示されず進捗も更新されない、よくあるやつ
まぁ、バックグラウンドで保存は進行するんだけど

ついでに確認したら一分当たりのリクエスト数上限は 12 に増えてる

**名無しさん＠お腹いっぱい。** · 2025/02/24(月) 03:25:21.89

2024/09/30 閉鎖アキバ総研 https://akiba-souken.com/article/66874/ https://www.itmedia.co.jp/news/articles/2408/01/news124.html
2024/11/26 閉鎖マンガ図書館Z https://closing.mangaz.com/info/2114/index.html
2024/12/20 閉鎖 vectorの作者個人ページ https://www.itmedia.co.jp/news/articles/2407/18/news117.html
2025/03/20 閉鎖？検索してはいけない言葉wiki https://w.atwiki.jp/mustnotsearch/pages/6128.html
2025/03/31 閉鎖魔法のiらんど https://maho.jp/info/entry/maho_i_will_no_longer_available
2025/03/31 閉鎖 SSブログ https://blog-wn.blog.ss-blog.jp/2024-11-15
2025/03/31 閉鎖ぷららのHPスペース https://www.docomo.ne.jp/info/notice/page/240627_01.html

久々に更新したら、魔法のiらんどとか今年度末に消えるサイトいっぱいあった…

**名無しさん＠お腹いっぱい。** · 2025/02/24(月) 08:47:17.23

disable ad blockerなる項目が出来てるけど広告系もまとめて保存するときにチェック入れる項目なのかな

**名無しさん＠お腹いっぱい。** · 2025/02/24(月) 09:56:42.82

>>188
めちゃくちゃ消えるな…
てか検索してはいけない言葉wikiとか
アニオタwikiとか
ポリシーに合致できないから消えるってのも
なかなか悲しいな
時代の歴史として残せないもんなのかね

**名無しさん＠お腹いっぱい。** · 2025/02/24(月) 12:53:27.78

atwikiは
https://w.atwiki.jp/mustnotsearch/?cmd=backup&action=source&pageid=1&id=478097
等の、過去の記事のソース表示を連続で行うと (errno=deny-sv-ax) で弾かれる。
めんどくっさ。

**名無しさん＠お腹いっぱい。** · 2025/02/24(月) 15:26:01.05

webarchiveてSAVEしたら画像が歯抜けになるのは何でなん？web魚拓やarchive todayとかはしっかり画像も全部記録するんだけど

**名無しさん＠お腹いっぱい。** · 2025/02/24(月) 17:16:14.66

リンクの上限に引っかかってるんじゃない？、よっぽど枚数が多くないとあり得ないとは思うけど
もしくはWBM側の問題、アーカイブされてから時間を置かないと表示されない時がある

**名無しさん＠お腹いっぱい。** · 2025/02/25(火) 04:27:50.00

ページを閲覧や保存しようとするといや応なしに503になるな…
そんなにいっぱいいっぱいなん?

**名無しさん＠お腹いっぱい。** · 2025/02/25(火) 13:17:25.66

ここ数日は重いのでそれが原因じゃね

**名無しさん＠お腹いっぱい。** · 2025/02/25(火) 21:07:46.91

5ちゃんの過去ログ
どうにかして端から端までアーカイブできないかな？
前みたいに過去ログ見れなくなって
今度こそ復旧不可になると困るし

**名無しさん＠お腹いっぱい。** · 2025/02/25(火) 21:08:55.83

現行スレのテンプレとかにURL載ってれば
スクレイピングして抽出して
アーカイブ残すことはできると思うんだが
現行スレにURLが載ってない場合はどうすれば良いかね？

**名無しさん＠お腹いっぱい。** · 2025/02/25(火) 21:56:50.47

現行鯖は鯖名.5ch.net/板名/oyster/ 以下のディレクトリインデックスが取れるから
HTML をアーカイブするにしてもそこから URL を逆生成すれば何とかなる
問題は kako 鯖か

**名無しさん＠お腹いっぱい。** · 2025/02/26(水) 14:18:16.21

せめてスレッドIDの一覧は定期的にアーカイブしておくべきだよな

**名無しさん＠お腹いっぱい。** · 2025/02/26(水) 20:53:41.53

とりあえず今アクセス出来るスレッドの一覧を公開しているサイトを張っておくか。*はそのまま抜いてくれ
http://m imi*zun.com/ httpsではアクセス出来ないのでhttp でアクセスする事。2ch初期からあって一応サーバーが止まっていない唯一の例か
http://op en.c*eek.jp/
https://ka kol*og.jp/
http://www.lo *gso* ku.c* om/ 昔有名だったサイト。今ではdnsすら止まってて完全に閉鎖
http://unk ar.org/ ここも同じく。昔あったサイト

ホスト名・板名(esite)・スレッドid・スレタイの網羅的な一覧を作りたい。
数年前に当時生きてた過去ログを全部スクレイピングしたんだけど、それが入ったSSDが死んじゃったんだよな…
sqliteで1ファイルにしたんだが、あれがどこかに残っていれば…

**名無しさん＠お腹いっぱい。** · 2025/02/28(金) 02:35:03.43

5chの過去ログ個人的には保存＆URLとっててもWebではアーカイブしてなかったけど
2019年あたりの一部スレッドなくなってるわ

**名無しさん＠お腹いっぱい。** · 2025/02/28(金) 09:46:58.00

かころぐβからデータ収集するならAPI使うといい
https://kakolog.jp/ajax/ajax_search.v16.cgi?q=&custom_date=&d=&o=&resnum=&bbs=&custom_resnum=&custom_resnum_dir=up&p=0&star=&mode=

**名無しさん＠お腹いっぱい。** · 2025/02/28(金) 09:50:33.74

q: 検索ワード
d: 年
bbs: 板名
p: ページ数（50スレずつ表.示される）
mode: infoを指定すると板ごとのスレ数が見れる
なんかここ数か月qを指定しつつmodeをinfoにするとエラーが返ってくるせいで現行しか検索結果に表示されないんだが、dをI999~2O25まで一つ一つ指定していけば全て見れる
2O24年1月時点のinfoのアーカイブを見る限りallは1O28万程だから抜けはそこそこあるだろうけどな

**名無しさん＠お腹いっぱい。** · 2025/02/28(金) 22:02:12.56

来月末で終了

「ファミ通App」サイト更新停止に関するお知らせ | ファミ通App【スマホゲーム情報サイト】 https://app.famitsu.com/article/202502/34931

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 05:02:27.86

ぷららは2014年頃までHPスペースを開設しているサイト一覧があったっぽい
カテゴリはサイトのオーナーが個別に登録する必要があるけど、ユーザーネームの頭文字の一覧があってこっちは全部ありそう？
https://web.archive.org/web/20140309134953/http://www.plala.or.jp/access/community/mhps

2014/10/31に「めんばーず・いんでっくす」が終了
https://www.plala.or.jp/support/info/2014/0714/index.html

「めんばーず・いんでっくす」からHPスペースごとのURL一覧を作るのと、
それに全部http getして今も生きているHPスペースの一覧を作るくらいかな。
余裕があれば今も生きているHPスペースをwgetでリンク再起取得してhtmlファイル一覧を作ってInternetArchiveに保存したいけど、もう間に合わない。

閉鎖したサービス、IAでURLを直打ちすれば見れます！なんてのは無いのと同じだから、インデックスはちゃんと作ってアクセス可能な状態にしておいてあげたい

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 05:22:18.89

SSブログは網羅的な一覧は無いっぽいけど、
カテゴリごとの妙に細かいランキングがあるからそれを舐めるしかないかな。
https://blog.ss-blog.jp/_contents/recent_articles/

魔法のiらんどは検索が1ページ20件でMAX500ページ＝1万件まで取得可能
https://maho.jp/search?page=500
フッターにカテゴリごとの検索リンクがある。
https://maho.jp/search?genre_name=love_comedy&order=published_at

ジャンル全てで検索すると作品数が703K＝70.3万本と出るけど
ジャンル：その他が32.5万でほぼ半分その他。
完全な一覧は無理だけど、検索から取れる作品で作者の一覧を作成→作者の作品一覧ページから作品の個別取得がベターかな。

小説作品はgraphQLをpostして取得してるから取るのは無理っぽい。
それでも作品の表紙テキストだけで結構な資料

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 05:24:02.83

>>204
スマホアプリこそサービスが終わると跡形もなくなるから、これが消えるのも残念すぎるよな…

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 05:29:43.86

ファミ通App、最古の記事はこのあたりかな。15年分の記事が消失と
https://app.famitsu.com/20101024_90800

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 13:06:44.88

>>194
と同じ現象が今起きてるな…
トップページは開けるけどまたサイバー攻撃でも食らってるのだろうか?

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 13:31:48.84

>>209
同じく
30～40分前までなんてことなかったのに突然つながらなくなった
数分前はトップすらつながらず

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 15:28:22.77

ファミ通AppはAPI使えばデータ収集できるな
2024-07以降
https://app.famitsu.com/api/archive?year=2024&month=07&order=asc&page=1&executedPagePath=/archive
2024-07以前
https://app.famitsu.com/api/archive?year=2010&month=10&order=asc&page=1&executedPagePath=/archive-history

URLパターン
①https://app.famitsu.com/article/202503/35240
②https://app.famitsu.com/20240701_2251205

2024-07以降の場合
"redirectUrl"が空であれば①
そうでなければ②

2024-07以前の場合
"historaArticleUrl"から②を取得可.能

タイトルとURLだけ集めてみたけどざっと6万5000件ある
これ以外にも特設サイトが何個か

**名無しさん＠お腹いっぱい。** · 2025/03/02(日) 17:13:24.77

>>211
いいね。apiが動いてる間にデータ取らないと…

スラドはちょっと前はテストドメインやスマホページでajaxで色々取れた記憶があるけど
今年に入ってからはコメント残り表示のperl以外が全部止まってるっぽくて凹んだ

**名無しさん＠お腹いっぱい。** · 2025/03/04(火) 09:12:35.31

ttps://x.com/tiyu12sai/status/1896502262291464539
ぷららが消えるという事は侍魂も消えるという事？という指摘

**名無しさん＠お腹いっぱい。** · 2025/03/04(火) 13:25:15.88

SPNにDisable ad blockerなる機能が追加されたみたいだな…
某生まれたばかりの掲示板のスレで試してみたけど結果は時間によってまちまちだな…

**名無しさん＠お腹いっぱい。** · 2025/03/04(火) 14:16:35.01

内部リンクを辿りながら一つのサイトを丸ごとWayback Machineに保存できるようなツールってある？

**名無しさん＠お腹いっぱい。** · 2025/03/04(火) 20:56:59.83

wgetで再起でやるとか？
調べたらローカルにファイルは保存しないでurlだけたどるオプションがあるらしい。

しかし今どきのサイトはそれじゃ補足してきれないよな。wgetもどこまで対応しているのかよくわからんし。
jsで動的に組み上げるurlは流石に対応してないだろうけど。

完璧にやるならchromeを自動化してurlを表示→devtoolからアクセスが発生したURL一覧をチェック→表示したページから別ページへのリンク一覧を抽出
→繰り返し
するかんじ？

**名無しさん＠お腹いっぱい。** · 2025/03/05(水) 02:30:40.49

>>203
見つからなかったスレ見つけられたわ
ありがとう

**名無しさん＠お腹いっぱい。** · 2025/03/05(水) 16:31:58.23

ヤフオクのページを取得すると、ご覧になろうとしているページは現在表示できません。となって取得できない・・・
archive.todayは取得できる

**名無しさん＠お腹いっぱい。** · 2025/03/05(水) 16:35:37.21

取得できないのか取得してるっぽいけどアーカイブが表示できないのか

**名無しさん＠お腹いっぱい。** · 2025/03/05(水) 16:36:25.58

>>218追記
ウェブ魚拓もOK

**名無しさん＠お腹いっぱい。** · 2025/03/05(水) 23:57:42.99

ぷららのHPスペースで生きているサイトの一覧を作りました

可能な限り全部のHPスペースのトップページにhttp getしたところ、ステータスコードが200になっているスペースは約1万件ありました
レスポンスヘッダーのlast-modifiedが1997年になってるサイトも9件。これが消えるのは予想以上にヤバい
生データのsqliteもあるから使ってくださいませ
作業に使ったソースコードも全部公開する予定です

https://i.imgur.com/3gMXlng.png
https://gist.github.com/fushihara/ef646feaf3b71f46adad2de26dd155f2

**名無しさん＠お腹いっぱい。** · 2025/03/06(木) 01:37:17.91

検索してはいけないwiki、本来3月20日まで投票してその結果に応じて判断のはずだったのに
今日方針転換があって即日閉鎖されてる。もう既にサイト404。したらばの掲示板も同じ
ttps://x.com/0X228liszt/status/1897293635584188830
ttps://x.com/MustNotSearch2/status/1897281908276646320

管理人暴走してねーかって気がするけど、とにかく消えてる
いやいやいや

**名無しさん＠お腹いっぱい。** · 2025/03/06(木) 14:06:02.19

どうやら復旧したらしい
ひとまずよかった
https://x.com/MustNotSearch2/status/1897481604056088752
https://i.imgur.com/lKLbikZ.png

https://w.atwiki.jp/mustnotsearch/

**名無しさん＠お腹いっぱい。** · 2025/03/06(木) 16:16:50.90

atwikiは他にもアニオタwikiとか、
10年前に流行ってた2ch大辞典とか、理不尽な点を強引に解釈するスレのまとめとか色々あったよなぁ
早めに保存しとかないとな

**名無しさん＠お腹いっぱい。** · 2025/03/07(金) 03:53:31.01

>>221
ありがとうございます、アーカイブに使用させていただきますm(__)m

**名無しさん＠お腹いっぱい。** · 2025/03/08(土) 13:29:16.11

https非対応のサイトとれなくなってんだな

**名無しさん＠お腹いっぱい。** · 2025/03/08(土) 20:15:53.31

>>225
反応ありがとう。

ぷららの全サイトに対してwget -r -np -nd してサブディレクトリにあるファイル一覧をDBにテーブルに追加した
index.101.sqlite.7z にactive_plala_hp_space_child_file_list テーブル

理論上はこのurl一覧を全部archiveすれば完全なアーカイブが出来るはず
と、思ったら--level の指定を忘れて5階層分までしか取れてなかった…

--level=inf を指定して取り直すかどうしよう

**名無しさん＠お腹いっぱい。** · 2025/03/08(土) 21:03:02.69

>>226
それは困る

**名無しさん＠お腹いっぱい。** · 2025/03/08(土) 21:55:30.73

結局検索してはいけない言葉wikiはどうなったんだろうか
マジで閉鎖するならアーカイブしないといけないんだが…

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 02:59:17.16

ぷららのHP、今アクティブなのが約1万サイト
中途半端だけどwgetでそのサイトのファイルをクロールしたURLの一覧が250万件
*.html,*.html に絞るとして約35万件。
全部新規にアーカイブを登録するのは到底不可能で、既にInternetArchiveに保存されているURLを除外しても間に合うかどうか。

URL一覧を渡せばアーカイブチーム側で取得してくれたりしないかな
90年代のHPも残ってますって言えば特例してくれんか

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 03:10:13.92

見てたサイトや見たことないけど役立つサイトとかもありそうなんだよな

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 03:34:44.35

ファミ通app、SSブログ、魔法のiらんどはとても手が回らない
魔法のiランドも多分00年代の小説残ってるんだよな…
しかもこっちは小説本文の表示にapi使ってるからアーカイブじゃ読めないし

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 05:06:06.16

ぷららの話ばかりで申し訳ない。

ぷらら、www\d.plala.or.jp だけだと思ったら以下の形式のurlもあるのか…多分これ有料プランっぽいな
http://www.t-gesui.hs.plala.or.jp/gesuidoukouhoukatudounituite.html
http://academic3.plala.or.jp/uragaku/
相当数を見逃してるんだろうな。もう無理ぽ

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 06:32:34.34

>>232
ファミ通APPに関してはAPIから取得できる2024年以前の記事は全てアーカイブされていました
確認方法はcdxからstatus_code200の総URLを取得してそこにあるかないか判別
特設サイトは未確認です

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 07:22:53.76

>>230
既にURLリストがあるなら話は早い
リンクのみを75個並べたページを用意する
そのページをsave_outlinksをオンにしアーカイブ
1分に75URLをアーカイブできるという荒業
URL一覧を渡して75個ずつのグループに分けURLリストを作成し、github pagesに自動デプロイすれば完全自動化可能
250万を75で割れば3万3333
それでも理論上3万分=約23日、アーカイブ失敗を考慮すればもっとかかるからアカウント何個か作って同時並行するしかないけどIPごとに制限されてるのかな
その場合は串も必要かもしれない
アーカイブ済みURLを削ればURL総数は大幅に減るから、まずはアーカイブされているかどうかを確認するのが現実的
スプレッドシートに5000ずつ500回投げるか、1万URL分CDXからゲットして照合していくか
ぜひとも手伝わせてほしい

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 11:43:52.53

>>234
いいね

>>235
すごい力技な方法だｗ

抽出したURL一覧をcsvにして以下にupしました。
https://81.gigafile.nu/0408-ccb7cfdb73fd53f011b40d508ff56db8f

ただ>>227 でも書いたけど、wgetの指定方法を間違えて plala.or.jp/xxxxx/ から5階層分しか抽出出来てなかった。
--level=inf を指定してurl一覧を取得し直してるけど、数日かかります
それでも閉鎖まであと20日しか無いし、ここで数日待つよりかは。貴重な土日だし

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 17:45:49.09

普通にアーカイブしようとしたら4回目からはじかれるけど
それを回避する何か方法があるのか

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 19:26:03.30

「普通」の定義次第だな
一分間（ほぼ正確な時計で0秒から次の0秒まで）に12回までアーカイブできる
別の「普通」ではその期間に5回まで

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 20:01:52.87

>>236
サンクス
アーカイブチェックしていきます
同一ドメインのurlが例えば1000以上あるものはcdx、1000以下のものはスプレッドシートと使い分けたら少しばかりは効率いいかもしれない

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 20:12:40.61

SSブログのURLが3万4000ほど集まったのでひとまず共有
自由に使ってＯＫ。再配布もＯＫ
https://81.gigafile.nu/0617-d4afe33e5f49115ada5a24891f09da0da
タグで検索しまくって収集しました
ssblog_urls：ブログURL一覧
checked_tags：チェック済みのタグ
check_scheduled_tags：これからチェックする予定のタグ
other_tags：ついでに集めたタグ

できる限り全て集めるにはother_tagsも含めて全てチェックする必要があるが、数が膨大だから最低限多くの人が使ってるであろうタグのみチェックすればよさそう
またSSブログは名称が変わったせいで未アーカイブチェックがより大変な気が。。。
https://xxx.blog.so-net.ne.jp/　→　https://xxx.blog.ss-blog.jp/
参照：　https://blog-wn.blog.ss-blog.jp/archive/201909-1

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 20:58:23.50

>>240
いいね！

昨日InternetArchiveのIRCに入って会話してみたんだけど、URL一覧のテキストを作成したら以下のircに投げるとアーカイブボットに登録してくれるらしい。
俺の場合は「日本の90年代からあるplalaというホスティングサービスが今月末にダウンする事になって、
URLの一覧を作ったんだけどこれをardchivebotに登録お願いできますか」って書き込んだら親切な人が教えてくれた。
https://chat.hackint.org/?join=%23archiveteam-bs
だからarchiebotに投げるのは多分ここが窓口
IRCなんて超久々に触って慣れなかった。ログが残らないからクライアントで接続しようとしてるんだけど、もうIRCってクライアントすら全然無くて困った

実際、今plalaのジョブが動いている。
http://archivebot.com/?initialFilter=plala
最終的にこれがweb.archive.org で見れるようになるという事を言っていた。

**名無しさん＠お腹いっぱい。** · 2025/03/09(日) 22:10:33.49

ここにいる人たちすごいね
言ってることさっぱりわからないけど
アーカイブへの信念が伝わってくる

微力だけど自分は見たいページを
一個一個手動でアーカイブしたり
拡張機能で自動でアーカイブさせたりして頑張ります…
そのうち色々archivebotとか上手く使えるようになりたいな

**名無しさん＠お腹いっぱい。** · 2025/03/10(月) 02:29:44.96

広告ブロッカーの間違ったフィルター¹のため読み込みに失敗しました。
エラーメッセージ：
Failed to load script: Error: Script not found

**名無しさん＠お腹いっぱい。** · 2025/03/10(月) 07:06:35.78

今月でAV通販サイトのarzonが閉鎖されるぞ

bot登録、NGかな

**名無しさん＠お腹いっぱい。** · 2025/03/10(月) 07:10:58.73

ttps://www.arzon.jp/vhs.html

これね

**名無しさん＠お腹いっぱい。** · 2025/03/10(月) 07:59:28.39

>>241
おお...こんな頼もしいものがあったとは
色々調べてみる、ありがとう

**名無しさん＠お腹いっぱい。** · 2025/03/10(月) 11:17:32.77

なんか、アーカイブがごっそり消えてんな。

**名無しさん＠お腹いっぱい。** · 2025/03/10(月) 15:55:37.25

ArchiveTeamに投げればいいのかな

**名無しさん＠お腹いっぱい。** · 2025/03/11(火) 13:26:31.80

裏技的なことだけど、ウェイバックマシンはtorブラウザから閲覧すると、接続拒否エラーが出にくい
接続拒否エラーになってもtorならipを変更すれば回避できる

**名無しさん＠お腹いっぱい。** · 2025/03/11(火) 17:39:11.85

Arzonのarchivebotの登録、誰かお願い

このままではFANZAに登録されていない、VHS時代のAV女優のデータが見れなくなる。

**名無しさん＠お腹いっぱい。** · 2025/03/11(火) 20:21:49.40

ほんとだ、>>250 このサイトも発売日1999年のVHSとかあるのか

**名無しさん＠お腹いっぱい。** · 2025/03/11(火) 20:55:11.33

どーせ藻有りなんて見ねーからと思ったけど、AV 女優のデータとしては重要か。
https://web.archive.org/web/20250311114322/www.arzon.jp/vhs.html

年齢認証は前スレのオリエント工業のサイトと同じやり方で通るけど、
それって archivebot で対応できるの?
https://mevius.5ch.net/test/read.cgi/esite/1690495133/588

**名無しさん＠お腹いっぱい。** · 2025/03/12(水) 12:16:40.73

archivebotは指定されたURLの下にあるコンテンツを再帰的に取得してWARCファイルに記録
そのWARCをArchiveTeamサーバーにアップロードして、最終的にWayback Machineに挿入されるという仕組みらしい
その再帰的にダウンロードする部分のコードはここに公開されてる
https://github.com/ArchiveTeam/ArchiveBot/blob/master/pipeline/archivebot/seesaw/wpull.py
これによるとredditとBlogspotの場合R18認証用にクッキー噛ませてるけど、それ以外は特に指定されてない
ドキュメント見た感じcookie指定するコマンドもない
https://github.com/ArchiveTeam/ArchiveBot/blob/master/doc/commands.rst
恐らく対応できないと思われる

**名無しさん＠お腹いっぱい。** · 2025/03/12(水) 21:02:36.16

こんなんどこで見つけるんだよ
よく調べてるなぁ素晴らしい

**名無しさん＠お腹いっぱい。** · 2025/03/13(木) 04:25:27.94

httpのページを保存しようとしたら何故かsave後のアドレスがhttpsに変わってエラーページが保存されちゃうけど何か良い対処法は無いものだろうか…

**名無しさん＠お腹いっぱい。** · 2025/03/13(木) 05:59:13.82

HTTP しか喋らないサーバはアーカイブ不可とか何なんだこれ
https://web.archive.org/web/1/mediaryugyong.com.kp/?lang=jp
オレオレ証明書な上に発行先とホスト名が一致しないとかいう完全に狂った相手でもアーカイブするのに

**名無しさん＠お腹いっぱい。** · 2025/03/13(木) 11:23:31.14

>>255
archive.isやウェブ魚拓を使えば保存出来なくもない。
ただ、archive.isの場合はjava scriptやらが動作しないし、ウェブ魚拓だとページ全体の容量が21MBを超えるとスクショのみの保存になってしまうという…。

**名無しさん＠お腹いっぱい。** · 2025/03/14(金) 18:48:38.21

TwitterをIAに入れる方法って何かある？Nitterはどこも無理だった

**名無しさん＠お腹いっぱい。** · 2025/03/14(金) 20:23:01.90

スラドがまたbad gatewayになってる…

**名無しさん＠お腹いっぱい。** · 2025/03/15(土) 16:30:37.16

https://srad.jp/
スラド、閉鎖確定。これも3/31かよ！

**名無しさん＠お腹いっぱい。** · 2025/03/15(土) 17:33:45.88

ラッシュだな

**名無しさん＠お腹いっぱい。** · 2025/03/16(日) 01:28:20.49

archivebotの処理履歴を眺めてるんだが
たまに元のサイトにアクセスしてみると
懐かしい気分に浸れるな
plala関連に絞り込みつつ無差別に覗けるの
割といいな

**名無しさん＠お腹いっぱい。** · 2025/03/16(日) 02:30:20.16

Blueskyって昔のTwitterみたいにスレッドごと取れる訳じゃないのか・・・

**名無しさん＠お腹いっぱい。** · 2025/03/16(日) 16:07:49.37

とりあえずぷららのサイト一覧を作った。
例えば吉野家コピペで有名な侍魂のサイトは http://www6.plala.or.jp/private-hp/ で、
↓のNo.2974 がそれ。▼を押すとサイト内のhtmlの一覧を見れる
https://fushihara.github.io/plala-archive/list/has-contents-page-10/
internetArchiveに登録された日付も表示してみたけど、htmlでも抜けが結構あるんだよな・・・

**名無しさん＠お腹いっぱい。** · 2025/03/16(日) 18:31:23.44

またIRCのarchiveteam-bs に入って、internetArchiveに不足しているファイルの一覧のURLを渡してarchivebotに登録してもらった。
やんわりとメールの archiveteam[@]archiveteam.org に送ってくれやと言われた。
ファイルは transfer.archivete.am にアップロードする事を要求された。

渡したURL一覧が登録されたら、
www\d.plala.or.jp/* はほぼ残る・・・と思う。ベストは尽くせたかな

**名無しさん＠お腹いっぱい。** · 2025/03/16(日) 19:25:45.08

乙っす、ありがとう。

**名無しさん＠お腹いっぱい。** · 2025/03/16(日) 19:29:56.11

おつ

**名無しさん＠お腹いっぱい。** · 2025/03/17(月) 20:28:51.50

ssブログのアーカイブをIRCに依頼した人がいた。
https://wiki.archiveteam.org/index.php/SS_Blog
個別のプロジェクトが立ってるからそっちに書いてくれって誘導されてたけど、そっちのチャンネルでは受け入れてもらえたんだろうか。
IRCって過去の発言見れないのが本当しんどいわ。

url一覧はこれ
https://transfer.archivete.am/W4clI/ssblog_urls.txt

**名無しさん＠お腹いっぱい。** · 2025/03/18(火) 01:40:14.88

リポジトリ自体は作られてるね、中身はまだないけど
https://github.com/archiveteam

**名無しさん＠お腹いっぱい。** · 2025/03/18(火) 09:39:15.42

これとこれだな。魔法のiランドもある！と思ったけど中身空っぽ
00年代のショート小説とかも文化なのに消えてしまうのか・・・

https://github.com/ArchiveTeam/sonetblog-grab
https://github.com/ArchiveTeam/mahonoiland-grab

**名無しさん＠お腹いっぱい。** · 2025/03/18(火) 18:08:45.84

>>268
それ俺だ
あのあと#sos-blog ってとこにリンク載せたんだけど深夜だったからか数時間反応なく
あの後放置してたら電源落ちてしまいどんな反応があったか確認できてない
チャンネルへのリンクはこれ
https://chat.hackint.org/#/connect?join=%23sos-blog
どんなことしてるのか右も左もわからないからまずはROMっといた方がいいのかな
とりあえず14万5000に増えたからうｐし直した
https://transfer.archivete.am/9p1Fk/ssblog_urls.txt

**名無しさん＠お腹いっぱい。** · 2025/03/18(火) 20:54:58.80

>>270
中身ないってことはなにも着手されてないのか
ブログ等はarchivebotでの再帰クロールは非効率だから各自でスクリプト組んで集めろってことなのかな？
とりあえず記事一覧もパターン化されてるから最低限/index/{数字}から記事URLを
プロフィールの画像一覧から画像URLを全てゲットしてdbに保存するコードをgptに聞きながら作ってみた
記事URL全部取得してからarchivebotへの登録（再帰取得なしで）を頼んだら受け入れてくれるかもしれない
ブログ100個分の記事を集めるのに23分かかった。もちろん記事の量によって変わるから何とも言えないけどこのままじゃ結構時間かかる
同時リクエスト数増やせば時短できるけどサイト側はどこまで許してくれるのか...
もっと効率よく記事集められる方法があったら教えとくれ

**名無しさん＠お腹いっぱい。** · 2025/03/18(火) 22:22:37.03

>>272
俺も軽く作ってみたけど、10分で60サイト分だからそんなもんかな。
何も考えずに速度最優先にするなら、 /index/[数字] で1づつ増やすんじゃなくて一気に10づつ取得すれば10倍とはいかないけど、3倍には少なくともいくと思う。
そこは怒られないかのチキンレース

しかし、URL一覧をいくつか開いてみたがほとんどアフェリエイトばっか・・・
というか、10個くらいURLをランダムに選んだけど全部アフェリエイトブログだったっていう
ちょっとやる気がなくなるやつ。

**名無しさん＠お腹いっぱい。** · 2025/03/18(火) 22:24:59.49

電子工作メディア「fabcross」閉鎖　4月以降、記事の閲覧不能に
https://www.itmedia.co.jp/news/articles/2503/18/news175.html
↓ここの2つ
https://engineer.fabcross.jp/
https://fabcross.jp/

ざっと見た感じ、ハードウェア系の技術者サイトでちょっと貴重かな
しかしもう半月もないっていう
もう無理です

**名無しさん＠お腹いっぱい。** · 2025/03/19(水) 00:57:43.67

>>273
ありがとう、もうちょいペース上げてみる
覗いてみたらたしかにアフィリエイト異様に多いな。。
先にa8.net等のアフィリンクが貼られてるかどうかチェックしたらだいぶ総数減りそう

**名無しさん＠お腹いっぱい。** · 2025/03/19(水) 20:48:13.32

a8.netだのvaluecommerce.comだの除いたら
https://10.gigafile.nu/0627-db129cd03494bcd234b32a6892c9beb44

**名無しさん＠お腹いっぱい。** · 2025/03/19(水) 20:50:14.52

誤爆
SSブログのアフィリンク除いたら5万まで減ったw
まだ取りこぼしあるかもしれないけどこれでかなり楽になった

**名無しさん＠お腹いっぱい。** · 2025/03/19(水) 21:35:13.29

おめでとう
14万5000がアフィブログを除いたら5万て・・・
そりゃサービス終了するわ

**名無しさん＠お腹いっぱい。** · 2025/03/19(水) 22:24:53.74

下記のサイトのURLの画像がarchive todayやウェブ魚拓で保存出来ません。
またウェブ魚拓は1か月～3週間ぐらい前からどんなサイトの保存を試みても
『失敗しました！』と表示されて保存出来なくなりました。
ウェブ魚拓への対処方法が最悪改善しなくとも、
下記のサイトのURLの画像だけは何とかして保存したいんですが、何か良い対処法はありませんか？
キャプチャーやスクリーンショットを取るしか方法はないでしょうか…？

画像https://ryuryumall.jp/onlineprod/2J/84ZHIB-007/84ZHIB-007_00_500_500.jpg
画像https://ryuryumall.jp/onlineprod/2J/84ZHIB-007/84ZHIB-007_04_500_500.jpg
出典元（保存済み）https://ryuryumall.jp/shop/miniministore/goods/2JA5PA/

**名無しさん＠お腹いっぱい。** · 2025/03/20(木) 00:35:39.95

日本国外からのアクセスを弾いてるとか、そういうやつかな。

**名無しさん＠お腹いっぱい。** · 2025/03/22(土) 08:23:05.49

アルゾン無理ですかね…

**名無しさん＠お腹いっぱい。** · 2025/03/22(土) 10:25:55.60

>>281
やるかはともかく、
商品個別のURLの形式と、商品の一覧ページを提示してくれるとやりやすくて助かる

商品個別のURLはこれだと思うけど、これ1から全部ある訳じゃないっぽいのと、最新の番号はいくつ？
https://www.arzon.jp/item_696056.html

一覧はこれかな。メディア全て、状態全て、在庫全て、範囲全て、新着順、1ページ120アイテムで5835ページ。全70万アイテム
https://www.arzon.jp/index.php?action=adult_itemlist&t=all&s=all&menu=new&m=all&mkt=all&sort=-udate&disp=120&from=2

https://www.arzon.jp/item_1426230.html 商品ページ
https://img.arzon.jp/image/1/1426/1426230L.jpg パッケージはこれ。URL推測できそうだな
1つの商品ページに複数の画像があるパターンある？

アダルト認証突破するにはセッションIDを送る必要がある。cookieでR18=true みたいのではない
htmlに入ってるトークン的なのは↓これくらいか
<meta name="verify-v1" content="xxx" />
<meta name="verify-v1" content="xxx" />
<meta name="msvalidate.01" content="xxx" />
<meta name="msvalidate.01" content="xxx" />

**名無しさん＠お腹いっぱい。** · 2025/03/22(土) 10:26:33.31

画像も直リン不可でセッションIDを送る必要があると

**名無しさん＠お腹いっぱい。** · 2025/03/22(土) 16:53:05.75

アルゾン、↓を見ると2025/03/14～18あたりに誰かが大量に保存してるっぽいな。画像も保存されてるっぽい
これでいいんじゃね？
https://web.archive.org/web/*/https://www.arzon.jp/item_*

**名無しさん＠お腹いっぱい。** · 2025/03/22(土) 16:55:55.55

>>1,188
閉鎖サイト更新
2024/09/30 閉鎖アキバ総研 https://akiba-souken.com/article/66874/ https://www.itmedia.co.jp/news/articles/2408/01/news124.html
2024/11/26 閉鎖マンガ図書館Z https://closing.mangaz.com/info/2114/index.html
2024/12/20 閉鎖 vectorの作者個人ページ https://www.itmedia.co.jp/news/articles/2407/18/news117.html
2025/03/20 閉鎖→回避検索してはいけない言葉wiki https://w.atwiki.jp/mustnotsearch/pages/6128.html
2025/03/31 閉鎖魔法のiらんど https://maho.jp/info/entry/maho_i_will_no_longer_available
2025/03/31 閉鎖 SSブログ https://blog-wn.blog.ss-blog.jp/2024-11-15
2025/03/31 閉鎖ぷららのHPスペース https://www.docomo.ne.jp/info/notice/page/240627_01.html
2025/03/31 閉鎖 ARZON https://www.arzon.jp/
2025/03/31 閉鎖電子工作サイト fabcross https://www.itmedia.co.jp/news/articles/2503/18/news175.html
2025/03/31 閉鎖スラド https://srad.jp/

**名無しさん＠お腹いっぱい。** · 2025/03/25(火) 21:39:50.06

なんかアーカイブbotが動いてたような…
誰か投げたのかね？

**名無しさん＠お腹いっぱい。** · 2025/03/25(火) 22:35:14.61

Arzonの出演者も希望
https://web.archive.org/web/*/https://www.arzon.jp/cast_*

**名無しさん＠お腹いっぱい。** · 2025/03/26(水) 23:01:28.38

plalaのarchive bot動いてない…？
終わった？

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 08:25:48.02

Sorry.
This snapshot cannot be displayed due to an internal error.

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 15:31:34.13

>>279
どなたか対策ないかアドバイスお願い致します。

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 16:44:05.72

ArchiveTeamはあくまでボランティアだからこれ（>>285）全部やってくれるかは分らんなぁ
しかも今はトランプ関連の方に力入れてるっぽいから普通に放置される可能性はある

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 17:19:58.68

>>291
ある程度はやっぱ個人でやるしかないな
それかBotに投げるか

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 18:00:43.43

量が多すぎて間に合わないからぷららだけやってくれたらな…

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 18:01:13.94

少しでもいいから

**名無しさん＠お腹いっぱい。** · 2025/03/27(木) 23:08:03.48

ぷららは個人的にある程度（80GB弱）wgetしたけど、-kでやるとタイムスタンプ飛んじゃうのね…

**名無しさん＠お腹いっぱい。** · 2025/03/28(金) 00:52:42.01

ぷららのURL一覧は少なくともarchiveTeamには渡したけど
どんだけarchiveされたのかよくわかんないんだよな

https://docs.google.com/document/d/1Nsv52MvSjbLb2PCpHlat0gkzw0EvtSgpKHu4mk0MnrA/edit?tab=t.0#heading=h.1gmodju1d6p0
↑ここに書いてあるapiを使えば、InternetArchiveのwebArchiveにURLを渡して、それが実際にアーカイブ完了されたかのステータスを取ることが出来るから自動化出来るんだけど
archiveTeamが動かしてるbotは速度が段違い
あれを動かす権限、もしくは方法教えてくれたらな

**名無しさん＠お腹いっぱい。** · 2025/03/28(金) 01:19:01.40

3/31閉鎖のはこれ以上はもうどうしようもないと思うけど、
今度webサービスが閉鎖されると発表された時はもっとうまくやりたい

多分アーカイブする基本的な流れは
webサイトのURL一覧を作る→archiveTeam に一覧のテキストを渡してArchiveBotに登録を依頼する
が基本だと思うけど、うまく連携取れてなかったのが心残り

正直この辺に日本語で作業issue立てるのが手っ取り早い気もするけど、気が引けるしな…
https://github.com/ArchiveTeam/sonetblog-grab

**名無しさん＠お腹いっぱい。** · 2025/03/28(金) 04:34:45.17

たぶん有志が渡してくれたURLリストをもとにアーカイブbotのジョブが17日に走ってるっぽい
間に合うかはわからんが

**名無しさん＠お腹いっぱい。** · 2025/03/28(金) 22:17:06.85

あのジョブ画面も見方がよくわからんのだよな
なんか個別のジョブが終わったのか処理中なのかURL決め打ちで見れないもんか

https://archive.fart.website/archivebot/viewer/
https://archive.fart.website/archivebot/viewer/items?page=59
こっから辿れんのかな

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 10:29:26.72

FC2WEBサービス終了のお知らせ（2025年6月30日）
ttp://www.fc2web.com/

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 11:35:44.12

ホームページとWEBで二種類あるのか紛らわしくてビビった

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 11:46:24.56

>>300
これでランキング見れるかと思ったけど、一部のカテゴリ以外は機能していなくて見れない
http://cgiserv01.fc2web.com/g-i-m-g-s/top/003/top_00000017_week_001.html

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 11:55:30.32

20日くらいにもう発表されてたのか…知らなかった

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 11:59:06.32

>>302
ランキングのアーカイヴがここにあった
https://web.archive.org/web/*/http://cgiserv01.fc2web.com/g-i-m-g-s/top/*
多分更新されてないランキングは表示されないんだと思う

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 15:07:19.47

fc2見てるとhttps://じゃないサイトわりとあるけどアーカイブできないならめんどいな

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 15:10:50.54

fc2web

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 21:25:21.30

4月からは少しゆっくりするかと思ったらFC2WEBか
休まらねえ

**名無しさん＠お腹いっぱい。** · 2025/03/29(土) 21:26:29.71

キモい