くだすれPython(超初心者用) その38

**デフォルトの名無しさん** · 2018/05/17(木) 11:09:14.54

このスレッドは、他のスレッドでは書き込めない超低レベル、
もしくは質問者自身何が何だか分からない質問を勇気を持って書き込むスレッドです。
へび使いが優しくコメントを返しますが、お礼は Python の布教と初心者の救済をお願いします。

エラーを解決したいときはエラー表示や環境(バージョン/IDE or command line)を略さずに書き込んで下さい。
騙りが頻発しています。質問する方は一時的なトリップをつけることを検討して下さい。
次スレは >>985 辺りで

前スレ
くだすれPython(超初心者用) その37
http://mevius.5ch.net/test/read.cgi/tech/1521271945/

**デフォルトの名無しさん** · 2018/06/20(水) 00:14:42.51

>>239
python2でもpython3でも動きませんでした。
他の方お願いします

**デフォルトの名無しさん** · 2018/06/20(水) 07:19:49.66

>>209
俺と同じ感想の人が居てた、python大好き

**デフォルトの名無しさん** · 2018/06/20(水) 08:12:14.73

やりたいことに集中できるのがPythonの良さなのは同意するけど、便利な既製のデータ構造なんか他の言語にもだいたい用意されてるだろ
Pythonは文法がシンプルで記述の自由度が低く、変な例外的な仕様も少ないから、
どの書き方が美しいかなどというくだらないことをあまり考えなくていいんだよ
その結果、やりたいことに集中できる

**デフォルトの名無しさん** · 2018/06/20(水) 09:59:20.08

C++にもベクターっていう超便利さんが居るじゃん

**デフォルトの名無しさん** · 2018/06/20(水) 12:35:53.89

1円硬貨： 8 枚
5円硬貨： 3 枚
10円硬貨： 2 枚
50円硬貨： 2 枚
100円硬貨： 3 枚

↑の硬貨のセットを持っているとする。

これらの硬貨を使って支払える金額のうち、その支払いに使える硬貨の組合せが
一通りしかないものの数を求めよ。

これを計算するためのプログラムを作ったのですが、正しい答えが出ません。
どこが間違っているのでしょうか？

http://codepad.org/Hyc8E6HM

**デフォルトの名無しさん** · 2018/06/20(水) 12:38:16.91

>>244

http://codepad.org/KYsvalF1

コードは↑こっちを見てください。

**デフォルトの名無しさん** · 2018/06/20(水) 15:34:20.79

>>243
Cの話してるところにC++の話題持ち込むと混乱するからやめて

**デフォルトの名無しさん** · 2018/06/20(水) 16:04:05.44

プログラミング全くの初心者なのですが、beautiful soupというのを学ぶのに一番適している本やWebサイトってどれでしょうか？

**デフォルトの名無しさん** · 2018/06/20(水) 16:29:37.34

ここで聞くのが早い

**デフォルトの名無しさん** · 2018/06/20(水) 18:27:58.86

なにか作リながら覚えたほうがいいよ

**デフォルトの名無しさん** · 2018/06/20(水) 18:37:51.47

>>245
俺には関数部分のコードが正しいのかはわからんのだが、
paysに0が含まれてるからとかってオチじゃないの？

**デフォルトの名無しさん** · 2018/06/20(水) 18:40:48.63

とりあえずPythonによるWebスクレイピングという本買って勉強してみます

**デフォルトの名無しさん** · 2018/06/20(水) 19:36:01.15

まずチュートリアルくらいやってから目的に着手しろ

**デフォルトの名無しさん** · 2018/06/20(水) 19:41:13.26

了解です！

**デフォルトの名無しさん** · 2018/06/20(水) 19:41:29.35

この間その本買ったけれどエキサイト翻訳かと思った

**デフォルトの名無しさん** · 2018/06/20(水) 22:49:52.55

jQuery, Ruby のNokogiri の、CSS セレクターを参照。
XPath よりも良い

なでしこの作者、クジラ飛行机の本は、難しいのか

**デフォルトの名無しさん** · 2018/06/21(木) 00:19:08.94

そんな言い方して初心者がわかるわけねーだろｗ

**デフォルトの名無しさん** · 2018/06/21(木) 00:34:34.36

またrubyスレ荒らしてこなきゃ…

**デフォルトの名無しさん** · 2018/06/21(木) 02:20:29.04

使命感なの？

**デフォルトの名無しさん** · 2018/06/21(木) 09:16:14.27

いいえ、自作自演です

**デフォルトの名無しさん** · 2018/06/21(木) 09:21:58.43

あたまいいな

**デフォルトの名無しさん** · 2018/06/21(木) 10:29:14.72

jythonみたいなやつでpython3のはありますか？

**デフォルトの名無しさん** · 2018/06/21(木) 12:28:34.50

ありません

**デフォルトの名無しさん** · 2018/06/21(木) 14:20:26.85

pypyならあります

**デフォルトの名無しさん** · 2018/06/21(木) 16:04:08.29

>>263
pypyってやつを使えばpython3とjavaを一緒に使えるんですか？

**デフォルトの名無しさん** · 2018/06/21(木) 16:46:24.14

楽観的な解釈をするならばYes
質問者のレベルに合わせて考えるならNo

**デフォルトの名無しさん** · 2018/06/21(木) 18:16:42.62

Anacondaからjupyter notebookを立ち上げてプログラムを起動するとno module named intertoolsというエラーが出ます
中身を確認したり何度かプログラムを動かしていると動作します
数分前まで動いていたプログラムでさえ立ち上げ直後は上記のエラー発生するのですが同様のケースを経験された方はいらっしゃいますか？

**デフォルトの名無しさん** · 2018/06/22(金) 07:26:43.33

ヘルプかマニュアルに書いてある

**デフォルトの名無しさん** · 2018/06/22(金) 09:31:36.57

itertools

**デフォルトの名無しさん** · 2018/06/22(金) 12:16:23.68

指定した値が入っているリスト番地を返すindexって命令がありますけど
あれの正規表現版みたいなのはないですか？

**デフォルトの名無しさん** · 2018/06/22(金) 12:44:11.76

みたいなのってなんやねん

**デフォルトの名無しさん** · 2018/06/22(金) 13:03:23.91

**デフォルトの名無しさん** · 2018/06/22(金) 13:42:50.45

>>269
https://docs.python.jp/3/library/re.html#re.match.start

**デフォルトの名無しさん** · 2018/06/22(金) 14:58:02.62

idx = next(i for i, v in enumerate(hogelist) if re.search(r"hage", v))
こういう事言ってるのかと思った

**デフォルトの名無しさん** · 2018/06/22(金) 16:28:11.91

>>272-273
目的を解決する標準関数はないけど
そのやり方を参考に自作関数を作ればいいわけですね
分かりました。ありがとうございます

**遊園地** · 2018/06/22(金) 21:15:46.77

2,3分で書くと、こんなもんかな。
import re
s = "012abc345def"
m = re.findall(r'[a-z]', s)
for i in m:print(i,re.search(i,s).span())

**遊園地** · 2018/06/22(金) 22:20:43.17

>>244は全部使うと1通りになります。的な？

**遊園地** · 2018/06/22(金) 22:22:53.99

合計金額とか
ない感じ、ですかね。

**デフォルトの名無しさん** · 2018/06/22(金) 22:24:50.81

>>244

解決しました。

http://codepad.org/Qwv8xxB5

**遊園地** · 2018/06/23(土) 09:53:25.33

できてないんじゃない？

50+10+10+1+1=72
50+10+5+5+1+1=72
50+5+5+5+1+1+1+1+1+1+1=72

etc..

**デフォルトの名無しさん** · 2018/06/23(土) 10:34:48.24

71通りになった
問題の解釈を間違ってなければだけど

**デフォルトの名無しさん** · 2018/06/23(土) 11:37:24.13

スクレイピングしたら
requests.exceptions.ConnectionErrorがでて
「既存の接続はリモートホストに強制的に切断されました」って表示されたんだけど
これ相手から弾かれたってことですよね

time.sleep(10) に入れてたんだけど少ないですかね。

**デフォルトの名無しさん** · 2018/06/23(土) 11:47:11.24

サイトによるだろ。株やFXならともかく、普通のサイトだと気が狂ってるとしか思えんフェッチする連中がいるし。

**デフォルトの名無しさん** · 2018/06/23(土) 11:59:31.45

denyされていなくてもサーバーが高負荷になってれば普通に出る
denyされてるのか単なるエラーなのかは切断の傾向から推測するしかない

それなしに、ただ切断されましたと言われても分かんないね

**281** · 2018/06/23(土) 12:44:32.88

>>281
>>282

ありがとう。
もしよければその単語の意味を確認させてほしい。

フェッチ＝データを取り出すこと
deny＝拒否する否定するなど

**デフォルトの名無しさん** · 2018/06/23(土) 13:17:45.77

接続を弾く場合、一般的にはファイヤーウォールやhttpdの機能を使う
それの設定の定番がallow-deny形式のルール

denyされた=ファイヤーウォールやhttpdで接続を拒否するように設定された
と考えて

**281** · 2018/06/23(土) 14:13:39.32

>>285

ありがとう。止まったのは夜中だから機械的にアクセス拒否されたと考えてます。
timesleepの秒数をもっと長くして、あとrondomと組み合わせて、同じ時間感覚でアクセスするのやめるて様子みてみます。

**遊園地** · 2018/06/23(土) 14:24:38.20

初歩的な対処法なら

同じIPアドレスからのアクセスの間隔が常にほぼ同じ秒数間隔の変更
同じIPアドレスから、同じユーザーエージェントで大量にアクセス　IP変更で対処

人間らしくないきっちりしすぎるアクセス　*1

何度もアクセスしてきているのに、セッションクッキーを絶対に送ってこない
＿＿CookieはWEBサーバーが発行し、ブラウザが保持するキーと値
＿＿セッションはWEBサーバーで保持するキーと値

確認方法
C:\Users\(ユーザー名)\AppData\Roaming\Microsoft\Windows\Cookies
ブラウザのアドレス欄に＿＿＿＿javascript:document.cookie;

リファラーがまったくない　ココは調べてる必要がある

＊１
＿＿HTMLだけにアクセスしてJavaScriptやCSS、画像にまったくアクセスしていない
注意：画像だけにアクセスしても同様に対処される

**デフォルトの名無しさん** · 2018/06/23(土) 14:26:59.81

それこそ人工知能で人間っぽくみせるプログラムとかを作ってほしいですよね。

**遊園地** · 2018/06/23(土) 14:29:45.70

いくつかの書式形式から、HTML構造を頻繁に変えられると
もう、維持の張り合い

そんなサイトに出くわした事はない。けどなーｗ

**遊園地** · 2018/06/23(土) 14:35:43.61

>>288
python関係ないけど、

費用掛かって良いなら、
＿＿＿RPAのトリガーを使う

試した事ないから、無理かもしれない。＋時間が膨大にかかる

**281** · 2018/06/23(土) 16:00:37.87

>>287
とても参考になります。

>同じIPアドレスからのアクセスの間隔が常にほぼ同じ秒数間隔の変更
やりました。今のところこれだけで大丈夫そうです。

＞同じIPアドレスから、同じユーザーエージェントで大量にアクセス　IP変更で対処
調べたらやり方がでてきたので、検討します。

＞人間らしくないきっちりしすぎるアクセス　*1
わかりました。覚えておきます。

＞C:\Users\(ユーザー名)\AppData\Roaming\Microsoft\Windows\Cookies
Appdateというフォルダがなく、C:\Users\(ユーザー名)、までしか一致しなかったです。
Cドライブ指定で「Cookies」で検索しましたが、これに関係ありそうなファイルにはたどり着けませんでした。
こちらwin10(64)です。

＞ブラウザのアドレス欄に＿＿＿＿javascript:document.cookie;
やりました。なんか文字いっぱい出てきました。

＞リファラーがまったくない　ココは調べてる必要がある
検索結果のURLに直接アクセスしてるので、TOPの検索経由でスクレイピングする方法も試してみます。

**遊園地** · 2018/06/23(土) 18:20:10.76

>>291
おめでとう。

　こっちはURLまで取得できるけど、保存だと弾かれて苦戦中

試しにIPとブラウザ偽装でも、ダメだった。

諦めて、PyAutoGUIでキーボードでブラウザ操作に切り替え用か迷ってる。

**デフォルトの名無しさん** · 2018/06/23(土) 21:41:08.02

質問です。

こんなふうなスクリプトを書いています。
https://pastebin.com/0KKDbGnp

68～75行目で変数に関数を代入していますが、77～78行目をコメントアウトしてあるので何も動かないと思うんですが、実際には6行目の関数が動いてprint(～)とinput()が求められてしまいます。
なぜ動くんでしょうか？

**デフォルトの名無しさん** · 2018/06/23(土) 21:56:20.14

>>293
68行目が実行されて、
get_service_id() が実行されているからでは。
むしろ、なんで77-78行目をコメントアウトすると、何も実行されないはずと考えたのかが理解不能。

**デフォルトの名無しさん** · 2018/06/23(土) 21:58:47.18

68行目でget_service_idを実行してるから。
関数の代入ではなく関数の評価結果の代入になってる。
だからget_service_id関数はそこで評価(実行)され、そこでinput求められてる。

**デフォルトの名無しさん** · 2018/06/23(土) 22:26:43.34

>>294
>>295
どうもありがとうございます。

変数には関数を代入したのでは無く、関数の処理結果を代入した場合は、77-78の有無にかかわらず68行目の時点で実行されてしまうんですね。

77や78を動かした時のみ上の関数が動くようにするにはどんな方法がありますか？

**デフォルトの名無しさん** · 2018/06/23(土) 22:33:19.54

え、ifも分からないとかそういうレベルなの
ifは分かるの？どう？

**デフォルトの名無しさん** · 2018/06/23(土) 22:36:48.34

if文は分かりますが、この場合どうやって使うんでしょうか？

**デフォルトの名無しさん** · 2018/06/23(土) 22:38:41.95

>>297
なんでいちいち煽るのスレタイ読めないの

**デフォルトの名無しさん** · 2018/06/23(土) 22:41:53.16

ifで77に必要なコードと78に必要なコードに分けろ
普通の頭ならそうする

＞77や78を動かした時のみ上の関数が動くようにするにはどんな方法がありますか？
変数を一切使わなければいい
あのコードだと読み辛すぎて普通の頭ならやらない

**デフォルトの名無しさん** · 2018/06/23(土) 22:57:34.69

>>300
どうもありがとうございます
ifの使い方、変数を使わない方法を考えてみます

**遊園地** · 2018/06/23(土) 23:03:26.61

何してるかすら分からないや。

https://ideone.com/yojJc6

**デフォルトの名無しさん** · 2018/06/23(土) 23:06:55.26

https://ideone.com/6BkLDd

**デフォルトの名無しさん** · 2018/06/24(日) 15:48:36.36

スクレイピングに挑戦してるんだど
503や404のHTTPerror別に処理を分ける方法ってありますか？

503の時は動作停止
404の時は動作続行
としたいんだけど…

検索してもさっぱり手掛かり掴めないので、
方法としてあるかどうかだけでも知りたいです。

**304** · 2018/06/24(日) 15:52:00.43

>>304補足です。
スクレイピング対象のURLは複数あって、
コード内のURL（途中まで）と、txtファイルから読み込んだパラメータを組み合わせて完成URLを生成してます。

**デフォルトの名無しさん** · 2018/06/24(日) 16:45:34.35

プログラミングもやったことないんですが、いきなりpythonの入門書をやっていいのでしょうか？

**デフォルトの名無しさん** · 2018/06/24(日) 16:49:24.00

それともPCの入門書みたいな本を先にやるべきでしょうか？

**デフォルトの名無しさん** · 2018/06/24(日) 17:11:02.94

>>305
まずは自分の書いたコード貼れよと
このスレで以前マジ叱責されたわ

**デフォルトの名無しさん** · 2018/06/24(日) 17:19:49.55

スクレイピングとapiについての質問なのですが
セキュリティ関連のあるサイトから検索し、結果を取得したいのですが提供されているapiがリクエスト上限が分間数件とかです…
もう少し効率よく取得したいのですがスクレイピングならこういう制限なく自由に取っていって良いんでしょうか？
robots.txtは確認しましたがdelayの項目は無く制限された階層?からの取得はありません。

**デフォルトの名無しさん** · 2018/06/24(日) 17:22:56.35

>>306
まずPythonをやる動機はあるのかい？
システムを外注する金がないからお前作れと上司から無茶振りされたとか、
学校の課題で出されたとか、具体的な動機がないとプログラミングは身につかない
ただやってみたいってだけで身に付くのは好奇心旺盛で頭が柔軟な子供のみ

◆QZaw55cn4c · 2018/06/24(日) 17:33:34.72

>>310
＞ただやってみたいってだけで身に付くのは好奇心旺盛で頭が柔軟な子供のみ
子供は子供相応のやさしい課題をやるから「やってみたい」だけで身につく、という面があるのだろうね
プログラミングは複雑だし、単に覚えるだけではなく創る面もあるから、継続してモチベーションを維持しないといけない
モチベーションの維持ってどうすればいいのかな？

**デフォルトの名無しさん** · 2018/06/24(日) 17:38:59.94

>>309
日本では悪しき前例があるから「どこまでならやっていいのか」に関しては部外者はなにも保証できない
そのサイトにルールが記載されてないなら運営に直接に尋ねるのが正解
尋ねた上でやるなと言われたら素直に諦めてAPIを使う
ビジネス上のメリットを提示して交渉できるなら希望はあるけど個人じゃ難しいよ

**デフォルトの名無しさん** · 2018/06/24(日) 18:02:51.87

>>312
ありがとう
英語のサイトで尋ねるのも大変ですし、この作業自体が隣の席の人がダルそうにチェックしてるから
どうにか出来ないかなレベルの話だからAPIで簡単に実装してみます
遅いダルいとか言い出したら昔の事件の存在とか少し伝えてそれでも欲しがったらスクレイピングしてみます改めてありがとう

**304** · 2018/06/24(日) 18:09:49.65

>>308
すみません。質問用に同様の動作をするコードを作りました。下記コードを元に何らかの助言が頂ければと思います。

urllistは質問用に設定したヤフーニュースの記事です。現状だと「res.raise_for_status()」が記述されているため、２つめの記事「～pickup/9999999」の読み取り時に404エラーが出て処理が停止します。

エラーコードは　～　requests.exceptions.HTTPError: 404 Client Error: Not Found for url: https://news.yahoo.co.jp/pickup/9999999　～　です。

実現したいことは、404エラーの時は停止せず、次のURL読み込みに進んでほしいのです。ただし、503エラーの時は、停止させたいと思っています。

res.raise_for_status()を消せば処理は進みますが、503の時もアクセスし続けてしまうことが課題です。

----------
import requests, bs4
import csv

urllist1 = [
'https://news.yahoo.co.jp/pickup/6287442',
'https://news.yahoo.co.jp/pickup/9999999',
'https://news.yahoo.co.jp/pickup/6287380',
]

with open('news.csv', 'w', encoding='CP932', errors='ignore') as f:
for urllist in urllist1:
res = requests.get(urllist)
res.raise_for_status()
soup = bs4.BeautifulSoup(res.text, "html.parser")
elems = soup.select('h2')
for elem in elems:
print(elem)
writer = csv.writer(f)
writer.writerows(elems)
----------

**デフォルトの名無しさん** · 2018/06/24(日) 18:37:04.52

>>310
文系の大学生で、暇なのでやってみたいと思いました…

**デフォルトの名無しさん** · 2018/06/24(日) 18:44:52.85

>>315
文系なら英語できる？
codecademyとかやってみたら、
わからん単語調べながら
環境構築も要らんし

**デフォルトの名無しさん** · 2018/06/24(日) 18:57:21.23

>>315
正直何に困ってるのか掴みかねますが
PCの入門本かpython入門本で迷うと言うことは基本的なPC知識が足りないと言うことでしょうか
自分で問題無く環境構築など進めるかと言った疑問でしょうか。

どちらにしても暇を持て余しているのであればネットで調べて実際にやってみると出来る出来ない分からないなどがはっきりし
質問しやすくなったり書籍購入するにしてもどういう本が良いか検討しやすくなると思われます。

**デフォルトの名無しさん** · 2018/06/24(日) 19:18:26.36

>>ID:2Vrp11he
そもそもPCをあまり使ったことがあまりないなら、まずはPCを使い倒すこと
その中で「一件片付けるのは簡単だけど、何百件単位で片付けなきゃいけないからやってられない」って作業を見つけたら
それをプログラムで解決してみればいい

あと、プログラムを覚える前段階として正規表現を覚えるといいよ
Webから情報をコピー→テキストエディタやエクセルに貼り付け→正規表現で整形
という作業を日常的によくやるようになったら、プログラムスキルも伸びやすいと思う

**デフォルトの名無しさん** · 2018/06/24(日) 19:25:45.93

>>314
for urllist in urllist1:
　　res = requests.get(urllist)
　　if res.status_code == 404:
　　　　# 何がしかの処理（必要なら)
　　　　continue　　　　　　# forに戻って次の処理に進む
　　res.raise_for_status()

**デフォルトの名無しさん** · 2018/06/24(日) 19:34:46.58

最初っからわかるヤツなんていない。

「どっから手を付けていいのかわからない」が当たり前。そこで苦しんで覚えるかってのが分岐点だな。

**314** · 2018/06/24(日) 19:55:19.06

>>319
ありがとうです！
ちょうどif文で調べてたところでした。
もっと勉強頑張ります！

**デフォルトの名無しさん** · 2018/06/24(日) 19:57:20.22

環境構築とか正規表現とか用語が分からないけど、やっぱり暇を活かして自分で少しやってみます

**314** · 2018/06/24(日) 20:25:01.44

>>319
すみません、よく見たら出力された記事が一番下の「～6287380」だけで、
一番上の「～6287442」が取得できていませんでした。
解決方法もしわかりましたらご回答お願いします。

**314** · 2018/06/24(日) 20:39:49.25

自己解決しました。
res.raise_for_status()　以下のインデントを間違えていました！
自己解決！

**デフォルトの名無しさん** · 2018/06/24(日) 23:18:20.51

まず学生は、cd, echo, cat とか、数十のLinux 基本コマンドから勉強する

謎のような呪文を覚えるって、皆言ってる

**デフォルトの名無しさん** · 2018/06/25(月) 05:30:16.27

ほとんど英語やん

**デフォルトの名無しさん** · 2018/06/25(月) 08:41:46.74

RPCやってみようと思うんだけどどれがオススメ？

**デフォルトの名無しさん** · 2018/06/25(月) 09:03:49.98

catって猫なの？

**デフォルトの名無しさん** · 2018/06/25(月) 09:36:34.17

いまだととりあえずgRPCしとけって空気だな

**デフォルトの名無しさん** · 2018/06/25(月) 11:11:09.05

c言語の構造体配列みたいなのはpythonでどうやればいいんですか？

**デフォルトの名無しさん** · 2018/06/25(月) 11:18:33.76

みたいなのではなく目的を言え
そんな聞き方をされても、同じものはPythonには無いとしか答えられん

**デフォルトの名無しさん** · 2018/06/25(月) 11:38:50.40

>>330
オブジェクト指向機能使えばいいのでは？

**デフォルトの名無しさん** · 2018/06/25(月) 11:59:32.82

>>332
アドバイス通りクラスとか配列とかいい感じにすればできそうです
ありがとうございました

**デフォルトの名無しさん** · 2018/06/25(月) 14:06:46.86

codeacademyって、Python3のコースってできたの？
それともまだ2だけ？

**デフォルトの名無しさん** · 2018/06/25(月) 14:24:05.55

>>330
ctypes
struct

**デフォルトの名無しさん** · 2018/06/25(月) 14:25:22.14

ctypes.Structure だった

**デフォルトの名無しさん** · 2018/06/25(月) 18:29:35.17

すみません
くっっっっっっっっっっっっっそ初心者丸出しの質問で申し訳ないです
公式からexeインストーラをDLしてインストールしたのですが、コマンドプロンプトでバージョン確認しようとしても
'python' は、内部コマンドまたは外部コマンド、
操作可能なプログラムまたはバッチファイルとして認識されていません。
と出て実行できません

インストール時にパスを通すオプションにはチェックを入れたし、念のため環境変数も確認しましたが
インストールフォルダ、及び配下のScriptフォルダがpathに設定されていました
OSはWin10 64bitです
使用したインストーラはpython-3.6.5-amd64.exeです
何がいけないのでしょうか

**デフォルトの名無しさん** · 2018/06/25(月) 18:35:53.90

>>337
3系はたぶん　python3　あるいは　py　だとおもうの

**デフォルトの名無しさん** · 2018/06/25(月) 18:43:36.08

>>338
マジだ
pyでした
ありがとうございました！