くだすれPython(超初心者用) その38

**デフォルトの名無しさん** · 2018/05/17(木) 11:09:14.54

このスレッドは、他のスレッドでは書き込めない超低レベル、
もしくは質問者自身何が何だか分からない質問を勇気を持って書き込むスレッドです。
へび使いが優しくコメントを返しますが、お礼は Python の布教と初心者の救済をお願いします。

エラーを解決したいときはエラー表示や環境(バージョン/IDE or command line)を略さずに書き込んで下さい。
騙りが頻発しています。質問する方は一時的なトリップをつけることを検討して下さい。
次スレは >>985 辺りで

前スレ
くだすれPython(超初心者用) その37
http://mevius.5ch.net/test/read.cgi/tech/1521271945/

**デフォルトの名無しさん** · 2018/05/26(土) 20:08:28.91

糞クローラーつくろうとするなｋｓｇ

**デフォルトの名無しさん** · 2018/05/26(土) 20:10:05.46

またスカトロの話してる…

**デフォルトの名無しさん** · 2018/05/26(土) 22:25:47.66

>>81
作ったら不味いヤツなんですか？便利そうだなーとか思ったんですが　

**デフォルトの名無しさん** · 2018/05/26(土) 22:55:59.70

トラフィックが増えてネットが重くなる

**デフォルトの名無しさん** · 2018/05/26(土) 23:13:43.20

>>84
そんなにですか
重くなるだろうなとは思ってたので50枚取ったら終わりみたいに軽めの限界は設定しようとしてたんですが甘かったですね
しかし目標が無くなってしまった

**デフォルトの名無しさん** · 2018/05/26(土) 23:38:34.04

レンタル糞サーバー使ってるサイトの身にもなってくれ

**デフォルトの名無しさん** · 2018/05/26(土) 23:42:59.64

>>86
レンタル糞サーバーが糞なのは陸の孤島ならぬネットの孤島やからやぞ
世間のトラフィックの99.9999999999999%はおまえんとこに影響ないからw

**デフォルトの名無しさん** · 2018/05/27(日) 03:31:42.23

>>80
クローラーは、wget を参照

画像判別は、OpenCV とか、
類似の定義のアルゴリズムの研究だけで、軽く数年以上掛かる

どういう画像が似ているのか、その定義が一番難しい

**デフォルトの名無しさん** · 2018/05/27(日) 11:30:53.46

たくさんPython野郎が遊び感覚でクローラー作ってネットを重くしているのか
トータルではgoogle以上にあっちこっちのサイトにクレクレしてたりしてな

**デフォルトの名無しさん** · 2018/05/27(日) 19:20:03.62

scrapyをホストするサービスが存在している時点でその辺は察してくれ

**デフォルトの名無しさん** · 2018/05/27(日) 22:46:31.42

このようなウンコも存在する模様
http://data.gunosy.io/entry/python-scrapy-scraping

＞務教育で教えても良いんじゃないかとよく思うWebクロールとスクレイピング

**デフォルトの名無しさん** · 2018/05/27(日) 22:47:44.18

例題に自社サービスを使ってるところだけは評価

**デフォルトの名無しさん** · 2018/05/27(日) 23:49:42.39

スレ違いだったらごめんなさい
自然言語処理をweb等を見様見真似で勉強してます
その中で共起ネットワーク図というものを見かけて面白そうだったのでやってみたいのですが、まだスクレイピングなどはやった事がないのでまずは青空文庫等のテキストデータを使って共起関係にある単語を表示してみたいと思っています
形態素解析するところまで出来たのですがその先の部分はサンプルなどを見つけられなくて行き詰まっています…
使うべきモジュールなども分からない状態なのですが、どのようにして共起している単語の抽出が行えるでしょうか？
初歩的な質問で申し訳ないのですがよろしくお願いします

**デフォルトの名無しさん** · 2018/05/28(月) 01:04:32.12

オライリーの本を買えばすぐわかるよ！

**デフォルトの名無しさん** · 2018/05/28(月) 04:26:40.64

さすがにこれは本読んでほしいね

**デフォルトの名無しさん** · 2018/05/28(月) 04:44:28.44

>>93
出現単語リストの直積のリストを作る
要素ごとにjaccard係数(*1)を求める
必要に応じてjaccard係数で足切り
グラフ描画ライブラリ(*2)で描画

*1
jaccard係数について
https://www.slideshare.net/mobile/khcoder/jaccard1

*2
NetworkXとか

大したことは言っていないので、
分からないなら潔く筋トレ(Pythonの)をしてから出直した方がいいと思います
命が掛かっているなら金次第で相談に乗ります

**デフォルトの名無しさん** · 2018/05/28(月) 07:39:17.97

>>93 です

>>94
>>95
ありがとうございます
やはり基本的な知識なのですね
今日帰宅時に本屋さん寄ってみます

>>96
ありがとうございます
何から手をつけて良いのか分からなかったので流れを教えて頂けてすごく嬉しいです
まずは”出現単語リストの直積のリスト”の部分について調べてみます
周りに聞ける人が誰も居ないのでお金を払ってでも…と毎日思います…

**デフォルトの名無しさん** · 2018/05/28(月) 09:00:41.36

pyautoguiを使ってるんですが、日本語キーボードの無変換キーを入力する方法ってないですか？

**デフォルトの名無しさん** · 2018/05/28(月) 09:08:11.00

事故解決しました　nonconvertですね

**デフォルトの名無しさん** · 2018/05/28(月) 12:18:42.73

>>96
重ねて質問してすいません
出現単語リストの直積リストを作る
という部分はitertoolsを使って作る事が出来ました

次の要素毎にjaccard係数を求める部分についてなのですが引数として２つのリストを与える必要があるのかなと思うのですが、この時引数とするリストは直積リストともうひとつは何に当たるのでしょうか？
形態素解析したリストになるのでしょうか？
せっかく流れを示して頂いたのにすいません
基本的な考え方も分からないんだと痛感します…

**デフォルトの名無しさん** · 2018/05/28(月) 17:58:55.76

pythonの本増えすぎじゃね？

**デフォルトの名無しさん** · 2018/05/28(月) 18:30:53.73

やんたの？

**デフォルトの名無しさん** · 2018/05/28(月) 18:40:42.01

ﾌﾟﾛｸﾞﾗﾐﾝｸﾞ全くの未経験で手を出してしまった…どうしよう

**デフォルトの名無しさん** · 2018/05/28(月) 19:28:13.46

そっと、手を引っ込めれば、大丈夫 ;)

**デフォルトの名無しさん** · 2018/05/29(火) 01:32:19.33

ダメ、自首しなさい

**デフォルトの名無しさん** · 2018/05/29(火) 08:25:22.63

本増えるのはいいけど入門書はいらん
もっと突っ込んだ内容のやつが増えて欲しい

**デフォルトの名無しさん** · 2018/05/29(火) 11:15:10.14

すごく、、、詳しいです。。

**デフォルトの名無しさん** · 2018/05/29(火) 17:00:13.32

numpyの配列の形を変えるにはどうしたらいいですか？
motoというshapeが(3,5)の配列があったとして
array([[1., 2., 3., 4., 5.],
[6., 7., 8., 9., 10.],
[11., 12., 13., 14., 15.]], dtype=float32)

この配列を以下のようなshape(3,5,1)の配列にしたいです
array([[[1., 2., 3., 4., 5.]],
[[6., 7., 8., 9., 10.]],
[[11., 12., 13., 14., 15.]]], dtype=float32)

配列をコピーする用に配列をつくってはみたものの
ここにどうやって形の違う配列をコピーすればいいのか分からないです

zr = np.zeros((3,5,1)).astype("i")

宜しくお願いします

**デフォルトの名無しさん** · 2018/05/29(火) 17:46:23.55

それだと 1,3,5 じゃないのか

**デフォルトの名無しさん** · 2018/05/29(火) 17:49:10.44

やりたいことが何か判らんが

>>> import numpy as np
>>> a = np.array([[1., 2., 3., 4., 5.],
... [6., 7., 8., 9., 10.],
... [11., 12., 13., 14., 15.]], dtype='float32')
>>> b = np.array([a])
>>> c = a.reshape(3,5,1)
>>> a.shape
(3, 5)
>>> b.shape
(1, 3, 5)
>>> c.shape
(3, 5, 1)

**108** · 2018/05/29(火) 18:00:06.08

>>110
ありがとうございます
ほげー、一行で出来るんですね・・・
まさかforで回すわけでもないしと悩んでました

numpyでグレースケールで採り込んだら
RGBのカラーの時の値が入ってた枠が無くなってしまって
ほげほげしてたところでした・・・助かりました。

**デフォルトの名無しさん** · 2018/05/29(火) 22:16:06.70

ipythonでインデント(ブロック)の終了ってどーやんの？っと

**デフォルトの名無しさん** · 2018/05/30(水) 00:11:49.14

>>112
エンター押しまくる

**デフォルトの名無しさん** · 2018/06/01(金) 14:32:40.20

docstringを使おうとしたらエラーが起きた

"""ほにゃらら"""

の形式で書いたんだけど、無情にも

SyntaxError: (unicode error) 'utf-8' codec can't decode byte 0x83 in position 1: invalid start byte

と返された。誰か助けて

**デフォルトの名無しさん** · 2018/06/01(金) 17:19:10.73

ファイルのエンコーディング確認

**デフォルトの名無しさん** · 2018/06/01(金) 18:08:04.05

coding: hogehoge

**デフォルトの名無しさん** · 2018/06/01(金) 20:50:43.65

なるほど、教えてもらったキーワードでググって
なんとなく理屈が見えたきた
ありがとう

**デフォルトの名無しさん** · 2018/06/02(土) 10:41:21.53

x = [0, 1, 2] みたいなリストを並び替えると
1番目 [0, 1, 2]
2番目 [0, 2, 1]
3番目 [1, 0, 2]
4番目 [1, 2, 0]
5番目 [2, 0, 1]
6番目 [2, 1, 0]
となるけど単純に f(x,3) -> [1, 0, 2] みたいに呼び出す方法ありますか

**デフォルトの名無しさん** · 2018/06/02(土) 11:47:22.91

>118
itertools で全部列挙しておいてから、m番目を返すコード。
リストxの長さを n とすると、O(n!)の計算量になるので、nが小さい値でしか使えない。
また、メモ化してるので、x にいろいろなのがくるとメモリが足りなくなる。
memo = dict()
def f(x, m):
x = tuple(x)
if x not in memo:
memo[x] = list(itertools.permutations(x))
return memo[x][m]

桁DPの要領でm番目を直接求めるアルゴリズムもあるとは思う。

**デフォルトの名無しさん** · 2018/06/02(土) 12:01:42.03

>119
下記にコードがあった。
最初のコードは間違っていて、後ろの方に出てくるのが正しいらしい。
計算量は、リストの長さをnとして、O(n^2)
http://code.activestate.com/recipes/126037-getting-nth-permutation-of-a-sequence/

**デフォルトの名無しさん** · 2018/06/02(土) 14:05:36.42

>リストを並び替えると
>...略...
>となるけど

なんで確定してんの？

**デフォルトの名無しさん** · 2018/06/02(土) 14:58:37.23

辞書順でって書いて欲しいよね

**デフォルトの名無しさん** · 2018/06/02(土) 15:04:41.70

でっていうｗ

**デフォルトの名無しさん** · 2018/06/02(土) 15:13:34.52

並び順次第でもっと高速アルゴリズムあるだろ

**デフォルトの名無しさん** · 2018/06/02(土) 15:15:45.21

あと要素に重複許すか許さないかも決めろ

**デフォルトの名無しさん** · 2018/06/03(日) 00:38:10.83

なんでもかんでも他人が決めてくれると思うなよ

**デフォルトの名無しさん** · 2018/06/03(日) 16:48:41.00

print("test")

**デフォルトの名無しさん** · 2018/06/03(日) 20:21:55.32

でかいカタツムリが頭から離れない

**デフォルトの名無しさん** · 2018/06/04(月) 01:25:24.68

Numpy(またはリスト)で

HOGE =
[[AB], [CD], [0]
[AB], [CD], [0]
[AB], [CD], [0]]

AB:A～Bの範囲で乱数
CD:C～Dの範囲で乱数

のような形で2重配列を生成する方法有りませんか？
出来ればnumpyの関数を使うなりで高速に処理したいです

**デフォルトの名無しさん** · 2018/06/04(月) 03:05:03.63

,足りないからsytax error

**デフォルトの名無しさん** · 2018/06/04(月) 03:37:22.59

>>129です
np.array([np.random.rand(1000) * 40 + 30, np.random.rand(1000) * 150 + 50, np.zeros(1000)])
としたら望んだ動作をさせることが出来ました
これが正攻法ですかね？

**デフォルトの名無しさん** · 2018/06/04(月) 12:05:28.08

リストでa=[[]]の状態から
a=[[1、1、1]、[2、2、2]、[3、3、3]]の状態にしたいんだけど
a[1].append(2)とするとindex out of rangeになる。
どうすればよかったの？

**デフォルトの名無しさん** · 2018/06/04(月) 13:01:34.66

何で分からないのか全く分からないが
最初にa.append([])すればいい

**デフォルトの名無しさん** · 2018/06/04(月) 13:10:05.65

多分indexが1から始まると思ってるんでしょう。

**デフォルトの名無しさん** · 2018/06/04(月) 16:10:44.39

This is append.

**デフォルトの名無しさん** · 2018/06/04(月) 19:35:46.16

Pythonってオブジェクト指向なの？
クラスあるだけ？

**デフォルトの名無しさん** · 2018/06/04(月) 20:11:09.05

pythonでは全てがオブジェクトだよ

**デフォルトの名無しさん** · 2018/06/04(月) 23:54:57.47

スクレイピングについて質問があります。
環境python3.6.5
(requests、beautifulsoup4インストール済み)
win10 64 pro
https://i.imgur.com/nzETfNB.jpg
写真のコマンドをShellで表示させる事は出来ました。
コマンドプロントで表示させようとすると一瞬表示されて落ちます。
hello worldは表示されたままです。
コマンドプロントで表示させるにはどうすれば良いのでしょう？

**デフォルトの名無しさん** · 2018/06/05(火) 00:11:16.44

椎名林檎と金慶珠

**デフォルトの名無しさん** · 2018/06/05(火) 02:02:26.17

プロントと言えばパスタでしょ

**デフォルトの名無しさん** · 2018/06/05(火) 07:12:27.46

タリーズのパスタセットのほうが好き

**デフォルトの名無しさん** · 2018/06/05(火) 08:25:09.33

昼間っからプロントの外席で酔っぱらえる暮らしがしたーい

**デフォルトの名無しさん** · 2018/06/05(火) 08:26:51.27

>138
a = input()
をプログラムの最終行に追加して、ユーザーからの入力待ちにしたら、コマンドプロンプトが閉じずに開いたままになると思うよ。

**デフォルトの名無しさん** · 2018/06/05(火) 09:18:02.25

でもコマンドプロントは閉じちゃうんでしょ？

**デフォルトの名無しさん** · 2018/06/05(火) 12:20:58.47

>>143
ヤッマーマンコーヒーライター

**デフォルトの名無しさん** · 2018/06/05(火) 13:30:42.56

おまんこポロンと

**138** · 2018/06/05(火) 15:33:40.43

>>143
ありがとうございます。出来ました。

**デフォルトの名無しさん** · 2018/06/05(火) 21:35:53.64

すみません、どなたか教えてください。
requestsでデータを取得したいのですが、一回目のget()は成功するのに、2回目以降が失敗してしまいます。どうしたらいいでしょうか？
ソースコード → ttps://pastebin.com/iKXzUgL5

**デフォルトの名無しさん** · 2018/06/05(火) 21:58:12.58

>>148
あんま見てないけどjson.loadsにリスト渡せれたっけ？

**デフォルトの名無しさん** · 2018/06/05(火) 23:12:10.76

失敗する時のurlは確かに自分が想定しているものか？
失敗する時のエラーコードはいくつ？
curlを打っても同じか？

**デフォルトの名無しさん** · 2018/06/06(水) 00:05:28.07

>>150
URLはチェックしたつもりでしたが、完全に見落としていたようです。
ホスト名がおかしくなってたのが原因でした。恥ずかしい・・・
お騒がせしまして誠に申し訳ありませんでした。

**デフォルトの名無しさん** · 2018/06/06(水) 02:19:30.77

遊園地とデートしたい

**デフォルトの名無しさん** · 2018/06/06(水) 08:19:21.14

大人の遊園地

**デフォルトの名無しさん** · 2018/06/06(水) 11:57:29.64

次の質問は cookiejar

**デフォルトの名無しさん** · 2018/06/07(木) 12:28:21.12

jupyterlabってjupyternotebookの上位互換でいいの？

**デフォルトの名無しさん** · 2018/06/07(木) 12:30:46.46

かぶせてるんじゃないの

**デフォルトの名無しさん** · 2018/06/07(木) 16:09:29.19

僕はかぶってないです

**デフォルトの名無しさん** · 2018/06/08(金) 00:07:27.05

どうせおしっこしか使い道のないちんちんなんだからそんなに気にすんな

**デフォルトの名無しさん** · 2018/06/08(金) 08:19:51.76

かぶきあげ

**デフォルトの名無しさん** · 2018/06/08(金) 09:15:17.84

pythonで開発してるんだけど
'ascii' codec can't encode characters in position 10-14: ordinal not in range(128)
が出るんだけど文字コードがおかしいから？
日本語が含まれているファイルをアップロードするとことで出てるんだけど。
_aaa = '会社一覧.txt'
_aaa.encode('utf-8')
とかしてもダメで困ってます。

**デフォルトの名無しさん** · 2018/06/08(金) 09:21:21.43

しらんがな

**デフォルトの名無しさん** · 2018/06/08(金) 09:28:53.74

>>160
２系使うな
３系使え

**160** · 2018/06/08(金) 09:34:49.45

Python3.6です。
サーバはcentos7です。

**デフォルトの名無しさん** · 2018/06/08(金) 09:46:33.00

そうなんだ

**デフォルトの名無しさん** · 2018/06/08(金) 09:51:32.35

じゃあﾌｧｲﾙのエンコードがおかしいんだろ

**160** · 2018/06/08(金) 09:54:31.46

ファイル名を英数字のみにしたら問題なくアップロードできるんです。

**デフォルトの名無しさん** · 2018/06/08(金) 09:56:14.12

そうなんだ

**デフォルトの名無しさん** · 2018/06/08(金) 10:21:53.19

>>166
じゃあそれで回避しる

**デフォルトの名無しさん** · 2018/06/08(金) 11:00:54.58

教えてください。
クラスを作って、それにデータを入れてって、
それをList配列にセットしていったら全部同じ内容になってしまいます。

調べてみたら参照になっているらしく、実態がひとつしかない？という
ことらしいのですけど、内容の異なるクラスをListに
保持するということはできないんでしょうか？

**デフォルトの名無しさん** · 2018/06/08(金) 11:41:11.12

言葉じゃなくてコードを貼れ

**デフォルトの名無しさん** · 2018/06/08(金) 12:44:14.84

C/C++ 以外の言語は、オブジェクトの中身がコピーされない。
オブジェクトの参照しかコピーされないから、参照は同一の実体を指す

中身までコピーしたいのなら、clone, deep copy みたいなメソッドを使って、
内側のオブジェクトまで、再帰的にコピーしていかなければならない

もし中身が参照だったら、その実体もコピーしなければならない

**デフォルトの名無しさん** · 2018/06/08(金) 15:52:16.84

>>158
しこしこすると、気持ちいいぞ
やってみ

**デフォルトの名無しさん** · 2018/06/08(金) 17:36:57.31

158じゃないけど、やってみた。
痛くて全然気持ちよくない。

**デフォルトの名無しさん** · 2018/06/08(金) 17:56:20.67

[Hoge(n) for n in range(10)]

**デフォルトの名無しさん** · 2018/06/08(金) 19:27:23.91

>>173
それは真性だから病院へGo!

**デフォルトの名無しさん** · 2018/06/08(金) 23:52:16.42

>>172
セフレがペロペロしてくれるずる剥け野郎で悪かったな

**デフォルトの名無しさん** · 2018/06/09(土) 17:37:21.10

独学プログラマーという本でpython勉強してるけど。ディープラーニングやるなら、統計学とか数学知識もだいぶ要求されるんですね。ディープラーニングなんて言葉もさっき知ったばかりだけど、目的もなくプログラミング勉強して仕方ないよね。

お前らはなんの目的をもって、python勉強してるん？

**デフォルトの名無しさん** · 2018/06/09(土) 17:42:01.07

欲望を満たすため

**デフォルトの名無しさん** · 2018/06/09(土) 17:53:36.86

乗るしか無い
このビッグウェーブに

**デフォルトの名無しさん** · 2018/06/09(土) 18:11:28.86

俺以外にも波乗り人がいて安心した

仕事は大工で転職したい訳でもないけど、ローテクの仕事してる人間として。プログラミングに憧れがあったんだよねー。