乃木坂関係の画像を一気にダウンロードできるソフト作ったンゴ
■ このスレッドは過去ログ倉庫に格納されています
ブログ、755、tokyopopline、モデルプレスの画像、動画がダウンロードできるソフト 見ず知らずの人間からexeファイルが届きました。
さぁ、実行しますか? ブログの画像をオリジナル画質で落とすソフト作ったけど需要ある?
http://mevius.5ch.net/test/read.cgi/nogizaka/1507899968/
ここで使ってくれてた人結構おるから心配なら読んでみてクレメンス >>10
ワイも三連休忙しくてなんもできんくてすまンゴ
落ちたら立て直せばええと思っとったけど毎回ウイルス認定されるのは面倒やな >>12
Windows専用やで
今android用を調べながら作っとるけどandroid持っとらんからまだ時間かかりそうや >>11
アプデしたやつ起動しようとすると毎回警告出るからなーw
でもみんな結構使ってるし信用されてるはず!! >>14
バージョンアップに見せかけてウイルス付き配布されたら、お前アウトだな >>15
そんなの個人の配布してるソフト全部そうやん… >>19
流石に知っとるで
個人でプログラミングの勉強がてらに作ったソフトに金かけて署名なんてしないやろ >>19
あと一応言っとくと>>18は
>バージョンアップに見せかけてウイルス付き配布されたら、お前アウトだな
に対しての発言やから署名どうこうは関係ないで >>22
そこまでして他人に自分のプログラムを使わせる理由はなに?
普通にGitHubやホームページで公開すれば良くないか? >>24
使ってくれって頼んどるわけやないんやが… >>25
じゃあ何度も同じスレ建てる必要ないだろ。 >>26
使いたい人使ってくれってスタンスでスレ立てとるだけやで 中身見てないから知らないけど、ちゃんと接続先に負荷かけないようにしてる?
ダウンロード済みのは再ダウンロードしないようにとか、
一定時間リトライできないようにしたりとか
特にブログの画像 横からだが気に食わない奴は見なければいい
クソアンチスレが腐るほどあるのにいちいち目くじらたてるようなことじゃないだろ
シッシッ 別に使うのが怖いなら使わなければいいだけ。
ンゴさん、気にしなくていいよ >>2
記事にアクセスされることで広告収入を得て、商売になっているわけ。
それを妨害するお前のソフトは配布することは乃木坂46に対する妨害であることに気づけや。 >>32
それはそうやけどアドブロックとかも同じやしそこまで悪質ではないやん >>33
アドブロックとは違い、お前のソフトは乃木坂の記事のPVを減らし、サーバの負荷を増加させる。
乃木坂にとってはアドブロック以上に害悪。 >>34
PVは普通のアクセスと一切変わらんし記事を一つづつ選ぶ形式やから負荷も普通のアクセスと大差ない
記事の文は保存しないし記事をブラウザで開く機能もつけてる >>35
もらった さんきゅー
まだ使ってねーけど >>1 乙
最初のスレで BlogDownloader7 までもろたで
その後スレ落ちして見てへんかったけど今度のもあんじょうできとるねや
7でも充分やったけど気になったとこも修正されとるし感謝感激やでー 蘭世の画像が壊れてると思ったら、ブログの画像が壊れてたわ アップデートしたンゴ パスはa
http://fast-uploader.com/file/7065691420134/
・画像拡大時にキーボードの左右キーで前の画像を表示できるようにした
・少し処理を軽くした いつも乙
ドーム関連で記事色々来るだろうしまた世話になります 機能とソース確認してからPV減るだのサーバーの負荷だの言ってくれよな
とりま>>1アプデお疲れさま
要望なんだけど、乃木坂関連のTwitterとインスタから落とせる機能が欲しい
写真集ラッシュで関連のTwitterとインスタが多くて追いきれなくなってる macでいろいろやったけど欠陥があって開けへん言われた 1ではないが、ツイッターはAPIの関係上、ある一定期間しか遡れない
スクレイピングは規定上禁止されてるから、APIを使うしかない
それでもいいってのなら既に他のソフトがある
紹介までに >>24
一昔前だとよくある光景だったんだよなw
今は金もらうアプリに慣れてるけど Macはソースコードの5行目から11行目までを削除してその下の
SCALING = b/a
ってところを
SCALING= 1
に変えれば動くんやないかな
もちろんPython3系、beautifulsoup4、Cython、Pygame、Kivy、RequestsとXcodeをインストールせなアカンけど
できたら月曜日あたりに友達のMac借りてコンパイルしてみるンゴ
Androidは結構プログラムを書き換えないとアカンのがわかったから結構掛かると思うンゴ
もしかしたら移植するより別のやり方で作り直したほうが簡単かもしれないンゴ
あんまり期待しないで待っててクレメンス
土日まぁまぁ暇やから(Android対応以外で)何か改善点とかあったら教えて欲しいンゴ
欅対応とか簡単やけど需要あるんかな あと前スレであった要望で記事と一緒に日付も表示してほしいっていうのがあったと思うんやけど
config.iniの1行目に「:::A」と追加すればタイトルと日付同時表示するようにしてあるンゴ
1行目が「15:::15」ってなってたら「15:::15:::A」や
お試し実装やからもし微妙やったら教えてクレメンス >>65
ソースフォルダーに.pyファイルしかないから
config.iniと言われてもわか蘭世
.pyのコードでいうと何行目だ?
↓の部分か?
para["daymaeB"],para["daymae7"] = "15","15"
あと、.pyをコンパイルするためにpythonインスコする場合は↓を参考にすればいいのか?
ttps://qiita.com/maisuto/items/404e5803372a44419d60 >>66
いやexeファイルと同じ階層にconfig.iniもしくはconfigってファイルないンゴ?
もしなかったら一回NogiDownloaderを起動して設定保存してクレメンス
そうしたら生成されるはずやから
あったらメモ帳とかのテキストエディタで開いて編集できるはずや
もう機能は内蔵されてるからコンパイルし直す必要はないで >>67
サンクス。設定保存でconfig生成できたわ
日付も表示できていい感じ(`・ω・´)
日付文字分、ブログタイトルの文字数が減るのは当然だけど
ボタンの左右いっぱいまで文字入らないかな?
あと全角3文字はいける希ガス
超個人的な要望('A`)
・TPLとMDPRにもこの日付表示ほしい
・間違えてボタンクリックしたときの画像ダウンロード中止ボタンがほしい 今頃悪いんだけど、ver15のやつ設定引き継げてないんだけど…
今までと同じでconfigがある所で起動したんだけど、とりあえず前のやつで問題ないからそのまま使うわ すごいな>>1。すなおにありがたい。
>>1が飽きるか運営に規制されるかで、いずれ使えなくなっちゃうだろうけど、それまで使わせてもらうわ >>72
ver11〜14のどれかのexeで読み込んで上書きで設定保存すればver15でも読み込めるようになるはず Android用に開発環境いじってたらブログラムが一つも動かなくなって焦ったンゴ
pythonを入れ直したらやっと直ったンゴ
アプデしたンゴ パスはa
http://fast-uploader.com/file/7065978198065/
・各解像度のディスプレイで適切な表示文字数になるように調整した
・ダウンロード中にもう一度ダウンロード開始をクリックするとダウンロードが中断されるようにした
・少し軽量化した
乃木坂と欅のウェブサイトって似たようなもんかと思ったら全然ちゃうんやな
欅はめっちゃモダンでハイテクやけど乃木坂は一昔前の雰囲気で安心するンゴ
欅は別アプリで出したほうがええよな? 設定引き継げない人は面倒かもしれんけどver13で開いてからconfig.iniを上書き保存してから最新版を開いてみてクレメンス
↓NogiDownloader13
http://fast-uploader.com/file/7065533818115/ クローラーで巡回する際は、各サイトの、robots.txt に従うように!
アクセスも、1日1回までにしておく
従わない場合は、業務妨害罪となる!
Ruby のAnemone では、DB で管理しているから、
1度ダウンロードしたものは、再度しない 「画像を一気にダウンロードできる」とは、
ブラウザ操作を自動化しているなら、クローラーになる
サイトへのアクセスは、手動しか認められていない。
ツールなどでアクセスした場合は、robots.txt に従わないといけない
ツールでのアクセスを認めると、手動では不可能な数のアクセスが生じるから、
電気代などが膨大になるから、業務妨害罪が適用される
認められるのは、手動のみ!
ツールでアクセスされるのを嫌がるサイトは、
サイトの説明書か、robots.txt に書いてあるはず。
とにかく、ツールでアクセスする場合は、1日1回までにしておく事
何回も電話かける奴いるだろ。
あれと同じ。しつこいと業務妨害罪! >>110
お前知識ないなら黙ってたほうがいいよ
一気にと言っても記事単位の話だしサーバーを根こそぎ探索する類のものでもない
ブラウザを自動化したらクローラになるなんて定義はない
通常、インデックスを作成する目的でなければクローラとは呼ばれない
>ツールなどでアクセスした場合は…
ブラウザもツールですw
そもそもソースを見れば手動では不可能なアクセスを発生させる類のソフトじゃないことくらいわかるだろ 図書館事件以後は、どの本にも書いてある。
ツールで頻繁に、図書館へアクセスしていた男が、逮捕された!
ツールでアクセスするのは、
業務妨害罪が適用されるので、しつこくアクセスしないように!
検索エンジンでも、1日1回しかアクセスしない
どこのサイトも、手動でのブラウザ操作を前提条件にしている。
ツールでアクセスするのは、認められない
基準は君が決めるのではなく、被害者が訴えたら、事件となる。
セクハラと同じ。
基準はサイト側が決める
サイトの説明書か、robots.txt に、アクセスルールが書いてあるはず。
それを守らなかったら、業務妨害罪
喫茶店で寝る奴もいるだろ。
それで警官に連れていかれる。それも業務妨害罪。
相手が決めたルールを守らない奴は、業務妨害罪になる >>112
お前レスちゃんと読んだ?
このソフトはクローラには該当しない
乃木坂ブログ専用ブラウザみたいなもんだろ
お前の手動の定義を言ってみろよ
このソフトで記事一覧を表示して記事をクリックしてその記事中の画像をダウンロードするのは手動じゃないのか?
ブラウザで記事を開くのと何が違う? まあ何かあったら偶然を言い訳にして新しい世界をノックすればいいんじゃないですかねー 8から最新版に変えたらGUIになっててフイタw
進化してんだなぁ がんばれよ 図書館事件でも、そうだよ。
でも逮捕された
とにかく頻繁にアクセスすると、業務妨害罪になる。
しかも、ツールでのアクセスは、通常(手動)のアクセスと、扱いが異なる。
プログラミングしたもの(ツール)は、通常の使用法では無いから
頻繁にアクセスすると、業務妨害罪になるって、どの本にも書いてある。
1日1回までなら、立件されない >>117
マジの文盲?会話になってないな
図書館事件のあれはまさしくインデックス制作のクローラだろ
しかも不当逮捕だと世間に認識されてる
>産業技術総合研究所情報セキュリティ研究センター、情報セキュリティー会社など3カ所による解析では男性の作成したクローラに違法性はなく、図書館の蔵書検索システムに不具合が存在していたと回答した[5]。
このクローラは、同時には一回しかリクエストを送らず、受信後に間隔をおいてから次のリクエストを送信していた(1秒に1アクセス程度に調整)。
>これはクローラの動作としては「常識的」「礼儀正しい」[6]程度のものであり、応答を待たずに過大なアクセスを行うことで高負荷にさせる攻撃用のプログラムと異なる動作であった。
>岡崎市立中央図書館のウェブサイトは、自治体のサイトとしては専門家でも想像できないほどに脆弱[6]なものであった。
>20日間の勾留と取り調べの後、6月14日には男性の業務妨害の強い意図が認められないとして起訴猶予処分[2]となったが、専門家や技術者からは長期にわたる勾留の正当性[3]およびそれ以前に逮捕が必要であったのかが疑問視されている[4]。
これ以上はぐらかして逃げられるの面倒だからこれに答えてくれよ
お前の言うブラウザとツールの違いは何? >>117
お前バカそうだからまとめてやるよ
・そもそもこのソフトはクローラではなく特定サイトの専用ブラウザ
・そもそも各サイトのrobots.txtに矛盾していない
・適切なアクセス間隔が開けられている
これで理解できたか? 俺の解釈じゃない。
自動・手動問わず、頻繁にアクセスすると、
業務妨害罪になるって、どの本にも書いてある。
1日1回までなら、立件されない
業務妨害罪の基準は、君が決めるものじゃない。
サイト側が、サイト側の基準で訴える
他人のコンセントから充電した奴が、1円の盗電で逮捕されてるだろ。
1円の被害でも、被害届さえ出せば、有罪にできる
訴えるかどうかは、サイト側が、サイト側の基準で決める。
君の基準じゃない
それに逮捕状は、行政執行機関である警察ではなく、
第三者である司法の裁判所が、公平に見て発行するもの。
警察が勝手にやってる捜査とは違う。
つまり警察に非は無い。
裁判所が決めたものだから、拘留も正当
つまり司法が逮捕状を出したという事は、
警察が決めた事じゃないから、重みが格段に違う
つまり誰が見ても、有罪確実という事!
だから、どの本にも、業務妨害罪になるって書いてある >>120
話ごまかして逃げんなw
1日1回とか言う謎理論の根拠は?
一般には1秒間に一回でやり過ぎなくらい行儀が良いとされてるけど
というかこのソフトで頻繁なアクセスは行われてないって言ってるよな?
このソフトがクローラじゃないってことは流石に理解できたか?
さっきから話めちゃくちゃだよ?w
早くブラウザとツールの違い答えてよw 大阪の主張は分かったから目的を明確化すればいいんじゃないですかね
業務妨害で逮捕される可能性がわずかながらあるという狼狽心からの忠告なのかそれともスレを萎縮させることが目的なのか
当事者でもない人間がここでいくら議論しても終着点は見えないし時間の無駄だと思う >ブラウザ操作を自動化しているなら、クローラーになる
→大間違い
>サイトへのアクセスは、手動しか認められていない
→大間違い
>ツールでアクセスする場合は、1日1回まで
→意味不明 1秒に1回までなら無罪というのは、大嘘だった!
裁判所から逮捕状が出たから、明らかに間違い。
司法のプロにより、逮捕できると判断された
だから頻繁にアクセスすると、業務妨害罪になるって、どの本にも書いてある
君ら、本を読んでないだろw
君らの知識が古すぎる
1日1回までなら立件されないというのは、
多くの検索エンジンが採用している基準で、常識的な範囲内
ブラウザを手動で使うというのも、常識的な使用範囲。
ブラウザにプログラミングを付け加えたり、プラグインを入れたりすれば、
常識的な範囲を逸脱する
常識的な範囲を逸脱すれば、故意になるから、有罪になる確率が上がる。
知らなかったという言い訳ができなくなる
とにかく君の基準じゃない。
サイト運営者が決める。
たった1円でも、サイトは被害届を出せる ブラウザにプログラミングを付け加えたり、プラグインを入れたりすれば、
常識的な使用範囲を逸脱する
犯罪の予備・準備行動にあたる。
犯罪現場に、凶器を持っていったのと同じ
悪質性が高くなるから、故意とみなされて、
勘違いでしたと言い訳できなくなる
それで有罪になる確率が上がる。
要するに、犯罪の準備をした奴は、故意でやりましたって自白したのと同じ
つまり、策を弄するな!
策士策に溺れる >>124
はい間違い
各検索エンジンボットのアクセス頻度は1日1回なんてもんじゃない
1週間で50セッションを超えることもあるしコンテンツ量が多ければ1セッションあたり何百リクエストもされる
1秒間に1回以上のリクエストもありえる
お前いっぱい指摘するとごまかして逃げるからまず一つ指摘してやるわw >>125
じゃあこのソフトはブラウザに付け加えたものじゃないしプラグインも入ってないから関係ないよな? >>124-125
なんかよく分からんけど、暇な大阪君が頑張って調べたのは分かった
勝てる見込みがあるんなら裁判起こせばいいじゃん
そもそも、いろいろとグレーの2chで違法どうこう叫んでもなんにもならないぞ
違法なことやってる板なんていっぱいあるし
その正義感を満たしたいならダウソ板とかオヌヌメだよ おバカさんのために調べてあげたよw
https://support.google.com/webmasters/answer/48620?hl=ja
>クロール速度とは、Googlebot がサイトのクロール時に行う 1 秒間あたりのリクエスト数のことであり、たとえば 1 秒間あたり 5 リクエストとなります。
えっグーグル逮捕されちゃうの?www 流石に大阪さんも恥ずかしくなって消えたかな
スレ汚し申し訳ない
間違った知識で講釈たれてたからつい指摘してしまった
このソフトは法的に何の問題もないから>>1は気にせず開発頑張ってください 各社の検索エンジンは、robots.txt に従ってる
それに、書いてある事は、俺の意見じゃない。
どの本にも書いてある。
お前ら、勉強してないだろ
「Rubyによるクローラー開発技法」の1ページ目に、
岡崎図書館事件で逮捕されたって書いてあるだろ
俺は、宅建・行政書士の資格も持ってる
梅田の客引きに、Tシャツを破られた事もある。
被害届を出そうと、警察へ行ったら、
俺も相手の胸ぐらをつかんだため、暴行罪になると言われて、泣き寝入りした
被害額が0 でも、胸をつかんだだけでも、暴行罪やぞ!
1円の盗電でも有罪になるし、喫茶店で居眠りしただけでも、業務妨害罪やぞ! 大阪さん保守ありがとう
たぶん12時間くらいでも大丈夫だと思うけど助かります^^ robot.txt言いたいだけの素人と
よく会話できるな ミスったー
らんぜの画面大丈夫だったときのやつなのに、上書きされて見られなくなってるわ とりあえず個スレから保管した
らんぜブログの画像はなんなんだ? 蘭世の画像壊れてるよね
あれ最初は大丈夫だったの?
俺が見たときはすでに壊れてたけど アップされた初めは大丈夫だった
最新3回分の寺田ブログみんな画像壊れてる 主さん、今はアプリ化に専念してんのかな?
時間かかりそうなら、しっかり保守しとかななー タスクトレイに常駐してぶーぶー言うメカゆったん作ってほしい 最新の松村さんとまあやの最初のやつが変だね
ファイル形式がNoneってなってる
なんだろう? NogiDownloader for macやっと完成したンゴ
http://fast-uploader.com/file/7066769379070/
パスはa
ファイル名変えるとうまく動かないから注意してクレメンス おつかれさま
乃木坂と違ってデコメーラーじゃないから2年分遡れるのね アップデートしたンゴ
KeyakiDownloader2
http://fast-uploader.com/file/7066854920136/
・ダウンロードが止まるバグを修正
・初投稿から取得できるようにした >>191
当面は別々で良いと思われる
また乃木のほうに、ブログのページをまるごとPDF化する機能を付け加えて欲しいと思う
ひめたん、まりっかのブログは卒業したら消される為、ブログの日付ごとにPDF化して保存できる機能を開発して付加して貰えればもっと多くの人にツールが広まるんじゃないか >>190
おつです
出来るか分かりませんが解凍したときのアイコン?緑色になりませんか?w うーんソフトにPDFの機能をつけるのは技術的にもライセンス的にも厳しいンゴ
Acrobat使うやり方考えてみたんやけどどうやろか
Adobe Acrobatでブログ全記事を一気にPDF化する方法
http://fast-uploader.com/file/7066880163984/
1. ↑をダウンロードする(パスはa)
2. Acrobatを起動して"ファイル"→"作成"→"WebページからPDF"を開く
3. 参照を押してダウンロードした"伊藤万理華.html"もしくは"中元日芽香.html"を選択
(100記事づつダウンロードしたい場合は分割ダウンロードフォルダ内のhtmlを選択)
4. "複数レベルをキャプチャ"からレベルを2レベルに変更して作成を選択
5. ダウンロードを終了するのを待つ(全部だと多分数時間掛かる)
6. 1ページ目を削除して保存
すべての記事が1ファイルになってしまうので記事ごとに分けたい場合はしおりごとに分割できるフリーソフト等で分割可能
一気にやるとメモリ不足で落ちることもあるようなので分割の方がいいかも
まぁまだひめたんもまりっかも更新するだろうから気が早いけど >>195
早速ありがとう
家帰ったら解凍して動作確認してみます >>191
どっちも要るって人より片方でいいって人のほうが多そうだから別のままでもいいけど、共用できるコードがあってメンテナンスが楽になるなら一緒でもいいんじゃない?
ってか、欅板にも貼ったほうがいいんじゃないかね 欅を初投稿から全員分終わった
29600枚w
丸々半日くらいかかったかなw ■ このスレッドは過去ログ倉庫に格納されています