Navi2ch for Emacs (Part 21)

[1 名無しさん＠お腹いっぱい。 2014/07/12(土) 10:06:10.24]

Emacsen で動く 2ch 専用ブラウザ、Navi2ch のスレッドです。

Navi2ch Project Home Page
http://navi2ch.sourceforge.net/

開発版
% cvs -z3 -d:pserver:[e-mail]:/cvsroot/navi2ch co navi2ch

過去ログ
>> ~/.navi2ch/etc.txt
> navi2ch
> http://navi2ch.sourceforge.net/log/
> navi2ch

前スレ
Navi2ch for Emacs (Part 20)
http://peace.2ch.net/test/read.cgi/unix/1265413075/

[399 名無しさん＠お腹いっぱい。 2015/03/03(火) 20:09:09.23]

3月中のある日突然だそうだ

268 名前：Grape Ape ★ 転載ダメ©2ch.net[sageteyon] 投稿日：2015/03/03(火) 19:40:21.03 ID:???*
>>267
It should be noted the date of the API becoming mandatory has not been officially
announced. That date will be some time in March. It won't be announced. It will
just happen at the appropriate time.
Regards
Jim

[400 名無しさん＠お腹いっぱい。 2015/03/03(火) 20:29:44.51]

サドンデス

[401 名無しさん＠お腹いっぱい。 2015/03/03(火) 21:14:01.77]

>>399
ひっどいなあ

[402 名無しさん＠お腹いっぱい。 2015/03/03(火) 23:01:37.03]

そしてこれを嫌儲にしか書いてないというのがまた

[403 名無しさん＠お腹いっぱい。 2015/03/04(水) 08:15:39.29]

Perlのhtmlスクレイピング実装がLinux板にあったよ。
http://hayabusa6.2ch.net/test/read.cgi/linux/1424216378/492

http://pastebin.com/Y91KfVsJ
cookie周りはnavi2chなら不要だと思う。

[404 名無しさん＠お腹いっぱい。 2015/03/04(水) 12:47:28.99]

>>399
屑の山下がAPI対応のJaneStyleいちおうで完成させる
までか。

[405 名無しさん＠お腹いっぱい。 2015/03/04(水) 12:58:03.40]

完成はしたらしいが。。。

[406 名無しさん＠お腹いっぱい。 2015/03/04(水) 15:31:17.79]

山下のパクリJaneはバイナリエディタで２バイト分書き
換えれば広告が出なくなるというｗ

[407 名無しさん＠お腹いっぱい。 2015/03/04(水) 15:35:30.70]

Styleの話はよそでやってよ

[408 名無しさん＠お腹いっぱい。 2015/03/04(水) 19:21:06.74]

どうせスクレイピングやるなら適応型とかにしてみてプチ研究したくなる
ペーパー2本くらいはいけんじゃね？

[409 名無しさん＠お腹いっぱい。 2015/03/04(水) 19:24:37.06]

>>408
適応型って何？

[410 名無しさん＠お腹いっぱい。 2015/03/04(水) 19:27:38.89]

>>409
本家が体裁とか小細工の対策とかしても、わざわざスクレイパーを書き直さなくていいように
自ら差分などから判断して変貌していくもの考えてた
既存だったらすまんこ

[411 名無しさん＠お腹いっぱい。 2015/03/04(水) 19:52:31.47]

黙ってやってればいいでしょ？＞プチ研究ｗ

[412 名無しさん＠お腹いっぱい。 2015/03/04(水) 20:06:30.66]

本家？　差分？　判断して変貌？　まあ何考えてるかしらんが勝手に頑張れ

[413 名無しさん＠お腹いっぱい。 2015/03/04(水) 21:52:32.94]

適応型でペーパーとか意味不
普通はブラウザエンジンでレンダリングしてそこからテキストと属性を抽出する
これで大体の変更はカバーできるし2ch程度ならこれで十分

[414 名無しさん＠お腹いっぱい。 2015/03/04(水) 23:25:56.13]

24.4はeww(ブラウザ)が標準で入ってて2chもそこそこ見れる
これを使わない手はない
側は別途作成して表示はeww(正確にはshr.el)を使ってレンダリング出来れば最高だな

[415 名無しさん＠お腹いっぱい。 2015/03/04(水) 23:30:16.09]

がんばれよ

[416 名無しさん＠お腹いっぱい。 2015/03/05(木) 22:26:31.94]

おれのヲチスレ、nextにいくらしい… sc と open みれるように設定したのにー。

[417 名無しさん＠お腹いっぱい。 2015/03/06(金) 01:14:29.11]

そのスレだけbookmarkしとけばいいんじゃね

[418 名無しさん＠お腹いっぱい。 2015/03/06(金) 23:50:59.25]

スマホからSSHでログインして使うとかありっすかね
設定はともかく、操作とか面倒そうで

[419 名無しさん＠お腹いっぱい。 2015/03/07(土) 00:17:39.14]

それは別のスレでやった方がいいんじゃないすかね

[420 名無しさん＠お腹いっぱい。 2015/03/07(土) 01:38:41.67]

ええそうなん？
スマホ使ってるやつの中でnav2ch使ってるやつ探すの相当大変だと思うんだけど・・・

[421 名無しさん＠お腹いっぱい。 2015/03/07(土) 01:59:25.82]

>>420
Advanced／W-ZERO3 [es]ではSSHでnavi2chも普通に使えてたよ
操作も全然問題なかった

[422 名無しさん＠お腹いっぱい。 2015/03/07(土) 02:03:38.09]

俺もアドエス使ってたけどあのハードウェアキーボードは最高だったな…

[423 名無しさん＠お腹いっぱい。 2015/03/07(土) 02:22:32.48]

なるほど、W-ZERO3とは懐かしい…
そういう話で賑わってた頃もありましたね
まぁとりあえず、自分で試してみないとですよね

[424 名無しさん＠お腹いっぱい。 2015/03/07(土) 04:07:25.99]

WPよりWM続けて欲しかった

[425 名無しさん＠お腹いっぱい。 2015/03/12(木) 20:57:14.57]

2ch
今日が最後かも？

[426 名無しさん＠お腹いっぱい。 2015/03/12(木) 22:48:20.47]

２ちゃんねる専用ブラウザをご利用の皆さまへ
http://www.2ch.net/browsers.html
> 3月13日からは新仕様に対応した専用ブラウザをご利用ください。

さて、ほんとにdatアクセスは止まるんだろうか。

[427 名無しさん＠お腹いっぱい。 2015/03/12(木) 22:54:03.64]

最後かもしれないから一言。
ありがとうnavi2ch。

[428 名無しさん＠お腹いっぱい。 2015/03/12(木) 23:04:46.92]

じゃあ自分も。
今までありがとう。ほんとうに使いやすかったです。

[429 名無しさん＠お腹いっぱい。 2015/03/12(木) 23:31:23.63]

13年間お世話になりました。いつかEmacs上で再会できますように。

[430 名無しさん＠お腹いっぱい。 2015/03/12(木) 23:58:17.61]

.netが終わったって
他の2ch型掲示板とかしたらばとか読み書きできるじゃない

[431 名無しさん＠お腹いっぱい。 2015/03/12(木) 23:59:02.80]

今までお世話になり、ありがとうございました

[432 名無しさん＠お腹いっぱい。 2015/03/13(金) 00:00:42.24]

さらば net こんにちは open

[433 名無しさん＠お腹いっぱい。 2015/03/13(金) 02:02:33.24]

まちBBSもあるでよ。

[434 名無しさん＠お腹いっぱい。 2015/03/13(金) 07:55:30.73]

ttp://prokusi.wiki.fc2.com/
実装増えてきてる。

[435 名無しさん＠お腹いっぱい。 2015/03/13(金) 09:18:56.88]

2001年の閉鎖騒動は炎上商法とマッチポンプ臭さあったけど
今回はユーザー数底上げで逆にユーザーに返り討ちにあってるアホ運営

[436 名無しさん＠お腹いっぱい。 2015/03/13(金) 10:50:43.39]

>>426
大多数は何も考えずに対応したブラウザに乗り換えてくれると
思うけど、Navi2chに限らず非対応ブラウザ使ってる人がわざわざ
別のブラウザに乗り換えてまでアクセスしてくれるとは限らんから、
datアクセス止めたら数割単位で閲覧者減っちゃうでしょ。

今の運営は単に金儲けしたいだけなんだから、言ってるだけで実際
は止めないんじゃないか。

[437 名無しさん＠お腹いっぱい。 2015/03/13(金) 10:57:16.49]

有料アカウント買って無くて広告ブロック完璧なユーザーを弾こうとしたんだろうけど
それが大多数だとわかっちゃったんだろうな

[438 名無しさん＠お腹いっぱい。 2015/03/13(金) 11:16:51.90]

さようならnavi2ch
こんにちは2chMate

[439 名無しさん＠お腹いっぱい。 2015/03/13(金) 11:20:23.32]

と思ったら、実際に一部の板はアクセス出来なくなってるな。。
scに行くかopenに行くか、大勢が明らかになるまで、しばらく様子を見るか。。

[440 名無しさん＠お腹いっぱい。 2015/03/13(金) 11:20:45.41]

とうとうNavi2chが更新内容を表示できなくなったね。

[441 名無しさん＠お腹いっぱい。 2015/03/13(金) 11:21:51.76]

と思ったら、実際に一部の板はアクセス出来なくなってるな。。
scに行くかopenに行くか、大勢が明らかになるまで、しばらく様子を見るか。。

[442 名無しさん＠お腹いっぱい。 2015/03/13(金) 11:24:24.32]

*BSDはAndroidエミュを搭載しろや！！

[443 名無しさん＠お腹いっぱい。 2015/03/13(金) 12:03:15.26]

navi2chで見れなくなったので

[444 名無しさん＠お腹いっぱい。 2015/03/13(金) 12:03:36.43]

他も見ようと対策してみたが。
(setq navi2ch-list-bbstable-url "http://kita.jikkyo.org/cbm/cbm.cgi/20.p0.jb.op.sc.m0/-all/bbsmenu.html";)
見出しだけ出てくるだけでスレッドには展開されないわ。
だれかSCとかOPの指導頼む

[445 名無しさん＠お腹いっぱい。 2015/03/13(金) 12:47:22.06]

>>444
SCのナビニッチスレッドで解決した
上記に足して下記を書き込むことで解決
(setq navi2ch-list-valid-host-regexp
(concat "\\("
(regexp-opt '(".2ch.net" ".bbspink.com" ".machibbsXXX.com" ".machiXXX.to" ".open2chXXX.net" ".2chXXX.sc"))
"\\)\\'"))
# NGワード禁止！らしいのでXXXを削除して
を、設定してみて

[446 名無しさん＠お腹いっぱい。 2015/03/13(金) 13:16:35.16]

普通にread.cgiベースで同じ動きをするやつ作ればいいんでしょ？
で、誰かお願い。

[447 名無しさん＠お腹いっぱい。 2015/03/13(金) 13:24:14.70]

情弱だからscに書き込んでしまったｗ

[448 名無しさん＠お腹いっぱい。 2015/03/13(金) 13:36:24.28]

ほい、2chproxy.pl
http://pastebin.com/xHYsXNLz

[449 名無しさん＠お腹いっぱい。 2015/03/13(金) 13:53:27.87]

串刺しがめんどい

[450 名無しさん＠お腹いっぱい。 2015/03/13(金) 14:11:52.78]

>> 445
駄目だな。

[451 名無しさん＠お腹いっぱい。 2015/03/13(金) 14:56:57.22]

~/.navi2ch/init.elに
(setq navi2ch-net-http-proxy "127.0.0.1:8080")
と書くだけでいいですよ。

webに何かしらの説明を追記した方がいいですかね。

[452 名無しさん＠お腹いっぱい。 2015/03/13(金) 15:01:52.96]

ほんとうにNavi2ch終わっちゃったんだな

お元気で
バイバイ！

[453 名無しさん＠お腹いっぱい。 2015/03/13(金) 15:59:47.41]

今までありがとう（´；ω；｀）みんなばいばい

[454 名無しさん＠お腹いっぱい。 2015/03/13(金) 16:34:59.09]

読めないけど書けるのな
よくわからん仕様だ

[455 名無しさん＠お腹いっぱい。 2015/03/13(金) 17:27:10.11]

読むのは sc で書くのはこっちでいいんじゃないか？
改修手間かな

[456 名無しさん＠お腹いっぱい。 2015/03/13(金) 17:35:27.75]

そういう関数つくればいいだけかと

[457 名無しさん＠お腹いっぱい。 2015/03/13(金) 17:41:17.77]

まだ書けますか?

[458 名無しさん＠お腹いっぱい。 2015/03/13(金) 18:53:02.51]

2chAPIProxy 経由

[459 名無しさん＠お腹いっぱい。 2015/03/13(金) 18:57:24.16]

我が家のNTEmacs上のNavi2ch、
Prxy2chをかまして、navi2ch-net-enable-http11をnilに戻して復活した！

[460 名無しさん＠お腹いっぱい。 2015/03/13(金) 19:01:16.57]

ていうかscの同期、今後もできるの？
それを阻止するためのapiだという話も聞いたけど。

[461 名無しさん＠お腹いっぱい。 2015/03/13(金) 19:31:07.63]

dat経由は無理でしょ
scも今はクロールで同期してるんじゃないかな

[462 名無しさん＠お腹いっぱい。 2015/03/13(金) 21:10:12.23]

>>458
>>459
スクレイピングproxy通してアクセスすれば今までと何も変わらんね

[463 名無しさん＠お腹いっぱい。 2015/03/13(金) 22:26:41.12]

>>445
>>448
>>451
他、
皆様、ありがとうございます。
まだまだnavi2chで生きていけそうです。

[464 名無しさん＠お腹いっぱい。 2015/03/13(金) 23:46:43.49]

どなたか分かりやすくまとめて下さる心優しい方はいらっしゃらないでしょうか？

[465 名無しさん＠お腹いっぱい。 2015/03/13(金) 23:58:09.36]

>>464
上の方のレスを参考にググればなんとかなるよ。頑張れ！

[466 名無しさん＠お腹いっぱい。 2015/03/14(土) 00:26:00.12]

ありがとうございます！
463さんにおなじです！

[467 名無しさん＠お腹いっぱい。 2015/03/14(土) 01:31:45.82]

http://pastebin.com/3k19a2B5
navi2chに対応させました(一応確認済)
ソース内のDEDICATED_BROWSERを"JD"→"Navi2ch"
DAT_DIRECTORYを"$ENV{HOME}/.navi2ch/"
にすれば差分取得出来ると思います

http://anago.2ch.net/test/read.cgi/software/1426169986/952
とのことです。

[468 名無しさん＠お腹いっぱい。 2015/03/14(土) 03:19:32.16]

>>467
これは素晴らしい!

[469 名無しさん＠お腹いっぱい。 2015/03/14(土) 03:28:08.16]

>>464
1. 2chproxy.plを>>467からダウンロードして2chproxy.plをemacsで開き>>467の設定
2. $ ./2chproxy.pl
3. .emacsに(setq navi2ch-net-http-proxy "localhost:8080")を追加
4. $ emacs
5. M-x navi2ch

[470 名無しさん＠お腹いっぱい。 2015/03/14(土) 03:34:35.91]

>>467 thx

でもスレ開こうとすると
「navi2ch-article-thread-stop-p: Wrong type argument: stringp, nil」
が出て、スレ読めないぜ…

[471 名無しさん＠お腹いっぱい。 2015/03/14(土) 04:48:00.11]

navi2ch + 2chproxy.pl で書き込み。

[472 名無しさん＠お腹いっぱい。 2015/03/14(土) 05:19:11.87]

テストなんかよそでやれよ
つか書込みに串かんけーねーからドアホが

[473 名無しさん＠お腹いっぱい。 2015/03/14(土) 05:30:35.77]

今試せる環境にないけどあとで試してみる！サンクス！

[474 名無しさん＠お腹いっぱい。 2015/03/14(土) 05:52:48.99]

まぁテストは他所でというのは賛成だが
2chproxy.plの場合、書き込みも少し関係ある

[475 名無しさん＠お腹いっぱい。 2015/03/14(土) 08:19:45.22]

間違ってscに書いてたのでこっちに。

golang とかで通信部分だけ外だしして、navi2ch でそれを使う形ならAPI利用許可取れたりしないかな？
それだと他から使われる可能性があるって事で却下される可能性が高いか？

[476 名無しさん＠お腹いっぱい。 2015/03/14(土) 11:08:34.71]

>>475
それじゃ事実上巷で出回ってる2chプロキシと同じだから通らんでしょう

[477 名無しさん＠お腹いっぱい。 2015/03/14(土) 11:52:58.81]

自分も間違えてscに書いてしまった。
cygwin上のemacsでもproxy使ってうまく読めた人居ます？

[478 名無しさん＠お腹いっぱい。 2015/03/14(土) 13:23:20.19]

>>477
cygwinじゃなくてNTemacs+Msys2上の2chproxy.plで >>471 さんと
同じエラーになったけどdecoded_contentが失敗しているようなので
2chproxy.plをいじって無理矢理charset指定(Shift_JIS)したら読めた

[479 名無しさん＠お腹いっぱい。 2015/03/14(土) 13:53:28.17]

いい機会だから2chをスマホ限定にして
距離を置こうと思っていたのに
あっという間に環境が整備されていく。
いやーこまったなー（棒読み）。

[480 名無しさん＠お腹いっぱい。 2015/03/14(土) 14:13:25.18]

>>478
>>470だけど、なるほど。debug-on-error で恐らく文字コードがUTF-8なのがいけないんだろうと思っていた、
けどそこねー。encodeしてやりゃいいのかな。thx

[481 名無しさん＠お腹いっぱい。 2015/03/14(土) 15:44:06.68]

>>480
だめだ、実力不足で、EUC環境ではどうperl script書き換えていいか分からない。
UTF-8環境だったら問題なく動いた。

[482 名無しさん＠お腹いっぱい。 2015/03/14(土) 16:10:35.82]

>>477
うちはCygwin Perl + NTEmacsという構成だけど、素直に動いたよ
一応LWP::protocol::httpsは必要
Cygwinの場合はパッケージになってる

けど、俺は↓のPython API版に乗り換えた
http://codepad.org/mxjxFd73
twistedを使っているので要インストール。Cygwinの場合はやはりパッケージになってる
AppKey, HMKeyあたりは修正する必要があった

正直ここまでして2ch利用する価値があるのかという疑問はあるｗ

[483 478 2015/03/14(土) 16:29:42.92]

あらら、470さんでしたね、失礼。
私もPerlは知らないんですが、こんな感じにdecoded_contentのある行を変えてます
my @content_array = &html2dat($response->decoded_content('charset' => "Shift_JIS"));
ログレベルをあげて見てるとcontentサイズが1とか出ていたのでdecoded_contentをcontentにしたら文字化け
ということで調べて適当に指定してみたら読めたので深く追求はしていません

[484 名無しさん＠お腹いっぱい。 2015/03/14(土) 16:50:39.80]

そか、datにスクレイピングする串作りゃいいんじゃん
って思いついたのがついさっき。
何もしないうちに環境が整ってた。ありがとう！

[485 名無しさん＠お腹いっぱい。 2015/03/14(土) 16:53:14.11]

普通の閲覧者みたいな挙動をするスクリプト作られたら結局API化しても意味ないんだよな

[486 名無しさん＠お腹いっぱい。 2015/03/14(土) 18:46:08.37]

2chproxy.pl (Cygwin Perl) + NTEmacs で書き込みテスト

[487 477 2015/03/14(土) 20:15:46.03]

>>483
ありがとう、cygwin版emacsでもそれでいけました!

[488 名無しさん＠お腹いっぱい。 2015/03/14(土) 20:56:19.80]

お陰様でいつものように書き込めるけど、
おーぷんやnextも育てて行きたいね
今の運営はこれからも不自由な場にする気だろうから

[489 名無しさん＠お腹いっぱい。 2015/03/14(土) 22:08:11.51]

navi2ch + 2chproxy.pl でカキコ。

[490 名無しさん＠お腹いっぱい。 2015/03/14(土) 22:55:16.44]

慣れない cpan とかで苦労したけど、何とかなりました…。
>>467, >>469, >>483 に感謝。

[491 名無しさん＠お腹いっぱい。 2015/03/15(日) 12:40:12.18]

専用ブラウザを助けるプロクシ作らね？ ★2 [転載禁止]©2ch.net
http://anago.2ch.net/test/read.cgi/software/1426170012/

お礼はここでどうぞ

[492 名無しさん＠お腹いっぱい。 2015/03/16(月) 10:14:43.35]

なんか調子が悪い
navi2ch + 2chproxy.pl

[493 名無しさん＠お腹いっぱい。 2015/03/16(月) 11:16:29.21]

いつも使ってる古いLinuxはダメだったが、最新のLinuxだとエラー
吐きながらも使えてるッポイ

[494 名無しさん＠お腹いっぱい。 2015/03/16(月) 11:39:01.96]

FreeBSDでも動いたけど
2chproxy.plが
./2chproxy.pl
とやっても動かなかった（command not found とでた）
#!/usr/local/bin/perl
にしでもだめ（パーミッションも777にした）
perl ./2chproxy.pl &
で動いたかからいいけど

[495 名無しさん＠お腹いっぱい。 2015/03/16(月) 11:41:24.87]

>>494
> FreeBSDでも動いたけど
> 2chproxy.plが
> ./2chproxy.pl
> とやっても動かなかった（command not found とでた）

それたぶん改行コードがCR+LFになってる
先頭の#!行だけは改行がLFのみでないとダメ

[496 名無しさん＠お腹いっぱい。 2015/03/16(月) 12:54:09.30]

>>495
そういう規程は知らなかった
後でのperlのスクリプトでカットしてみる
確かchopだったかな

[497 470 2015/03/16(月) 13:11:53.44]

>>483
重ねてありがとう。

もうスレ・板違いになってるけど、せっかくなので報告。

Navi2chを読んでいる古いLinux(Plamo Linux 4.x : EUC環境)にて、perl-8.14.4を作ってみたけど、
> my @content_array = &html2dat($response->decoded_content('charset' => "Shift_JIS"));
にしても、Net::Message::decoded_content に失敗する模様。

ヘッダを見たところ Content-Type: text/html で、メタタグは Shift_JIS なんだけどねぇ…
当然 UTF-8, EUC-JP にしてもだめ。'cp932' にしても変わらず。length = 1
となる。

面倒になって localhost で実行するのは諦めて、LAN上の UTF-8 だけど超非
力な Linux Box で起動して、そこを経由してる。スクレイピングが遅くてイ
ライラするけど読めないよりマシ。

[498 名無しさん＠お腹いっぱい。 2015/03/16(月) 13:21:34.29]

>>497
IO::HTML.pmがインストールされていないとそうなるっぽい
ｽﾚﾁｽﾏｿ

[499 名無しさん＠お腹いっぱい。 2015/03/16(月) 13:41:54.81]

>>496
emacs使ってるんだからM-x set-buffer-file-coding-systemでいいだろ…