Pythonのお勉強 Part70

2023/03/04(土) 00:18:00.31

↑スレ立てる毎に減るので、減ってたら３つに補充すること。

・当スレにRubyのソースコード類を書くことを禁ず
・Ruby等、Pythonではないプログラミング言語での回答類・質問を書くのも禁止
・「Ruby では」「Rubyでは」「Rails」正規表現→「^クソチョンw$」をNGワード登録推奨
・エラーを解決したいときは、かならず
　エラー文（勝手に省略orスクショうｐ等の横着禁止）と
　おま環（Pythonのバージョン番号＋OS名とバージョン＋IDE名）を書け。

★Pythonのソースコードを５ちゃんに直貼はインデントが崩壊するので、
　　↓等のコードうｐ用サイトに貼ってきてくだしあ。（スクリーンショットをうｐる「横着」禁止）
ttps://techiedelight.com/compiler/　　Run Code機能あり。
ttp://ideone.com/　　　　　　デフォ設定がCなので、Pythonするには言語種選択ボタン押下がﾋﾟｺ手間かも。
ttp://pastebin.com/　　　　　まずまずシンプル。
ttp://dpaste.com/　　　　　　とてもシンプル。消えるまでの日数は十分長ーく指定のこと。

◇Pythonオフィシャルサイト　http://www.python.org/
◇Pythonドキュメント　https://docs.python.org/ja/3/
◇まとめwiki　ttp://python.rdy.jp/

VIPQ2_EXTDAT: default:vvvvv:1000:512:: EXT was configured

2023/07/30(日) 17:23:26.95

そりゃ環境変数案件だな

2023/07/30(日) 18:30:42.96

>>715のenvとvenvは別もんよな？

2023/07/30(日) 20:26:24.18

import traceback
print(traceback.extract_stack()[0].filename)
これで実行開始のファイル名が取れたりしない？
スタックトレースの1番最初を取ってくる感じだけど

試してないので、出来なかったらごめんなさい

**718** (ﾜｯﾁｮｲ 7e33-CF7t) · 2023/07/30(日) 20:37:36.60

よな？違う？どうなん>>715

2023/07/30(日) 20:42:39.05

これならいけそう

2023/07/31(月) 01:38:57.99

>>718
env: 普通は環境変数のことを言う
venv: 公式の仮想環境ツール
だからまったく関係ないよ

2023/07/31(月) 06:36:07.27

python.exeのある場所をカレントディレクトリにして立ち上がるのが間違ってるんだよな
そんな場所に用はない
何かのオプションを付けると、pyの場所をカレントにして立ち上がるとかになってるべき
本当はそれがデフォルトであって欲しい

2023/07/31(月) 07:13:10.38

2023/07/31(月) 08:10:06.12

>>723
実行環境無視しろってこと？
インストールしてるライブラリーも環境によって違うのに？

2023/07/31(月) 08:14:28.90

ハイレベル過ぎてついて行けない

2023/07/31(月) 10:02:13.71

if __name__ == '__main__': で __main__ 描いている人は多いと思うけど
__file__ で自分の .py の位置取れるの知らない人は多い

2023/07/31(月) 11:12:47.09

>>727
> 自分の .py
とは何。

2023/07/31(月) 14:10:18.34

ググらんの？

2023/07/31(月) 14:29:11.89

>>702
ググって分かることなのか...

> python.exeのある場所をカレントディレクトリにして立ち上がる

とか、京人が妄言を交わしているようにし見えないけど、皆真摯に話しているので事実なんだろうね...

2023/07/31(月) 14:42:29.33

眼の前に答えがあっても観えない
観ようともしないフシアナさんには
Pythonは無理

2023/07/31(月) 14:52:20.98

>>716
使える
>>730
事実ではない

2023/07/31(月) 14:52:49.91

VSCODEでワークスペースに置いて作業すれば全て解決する話なのでは？
>test.py云々

2023/07/31(月) 21:15:58.91

>>716
venvなんてPythonの実行環境をvenvディレクトリ内にそのまま持ってるだけだから、そこのPython実行ファイルをフルパスで直接指定してやればいいだけ

普通はPythonにパスが通ってる状態で
python hoge.py
とかで実行するけど、それを
C:¥foo¥bar¥puroguramu¥venv¥bin¥python hoge.py
みたいにやる

2023/07/31(月) 21:24:17.33

venvそういうのなのか
コンソールでコマンド打って、今からここだけバージョンなんとか、みたいに使うんだと思ってた
複数のバージョンを切り替えたい要求は特に無いので全部最新で構わない

venvとhoge.pyが自分の場所が判ることとは関係ないよね

2023/07/31(月) 22:03:58.43

python hoge.pyしたらインストール先のpython.exeが呼ばれるけど、venvをactivateした場合はpython hoge.pyしたらvenvのpython.exeが呼ばれる
Lib\site-packagesも同様
仮想環境っていうかインストールした環境と切り離して実行環境を構築できるのがvenv
venv環境のPythonバージョンはvenv作るときに実行したPythonのバージョンと同じになる

2023/08/01(火) 14:23:03.31

<div class="form-input-wrapper" data-v-a0d39a18=""><input type="text" name="" value="" placeholder="メールアドレス" class="form-input" data-v-a0d39a18=""></div>
seleniumでこんなelementを取得してsend_keys()しても何も入らない
ぐぐって見つかる自動ログインの記事とhtmlの書き方が違う
何か別の方法が必要?

2023/08/01(火) 14:25:20.51

と思ったらできた
> input を削ったのを忘れてた

2023/08/01(火) 17:28:09.70

折角作ったのに、本番環境のwin7では動かなかった

2023/08/01(火) 20:03:07.92

selenium4だったのが原因みたいで3にしたら動いた
開発用は普通にインストールしたのになんで3だったんだ?

2023/08/02(水) 09:26:45.38

日記は日記スレで

2023/08/02(水) 10:15:35.41

オナニー見せたい人なんだろうな

2023/08/03(木) 03:06:00.60

cwd(current working directory)の移動か？
VSCode の拡張機能・Code Runner なら、この設定をチェックしておく

Code-runner: File Directory As Cwd
Whether to use the directory of the file to be executed as the working directory.

そうすると実行時にcd で、そのファイルがある場所へカレントディレクトリを移動してから、
ruby "絶対パス/ファイル名.rb"
又は、ruby "絶対パス/tempCodeRunnerFile.rb"
で、そのファイルを実行する

tempCodeRunnerFile.rb は、Rubyのコード片をコピーした一時的なファイル

設定項目、executorMap には、多くの言語の実行コマンドが書いてある。
"code-runner.executorMap": {

"javascript": "node",

"c": "cd $dir && gcc $fileName -o $fileNameWithoutExt && $dir$fileNameWithoutExt",
"cpp": "cd $dir && g++ $fileName -o $fileNameWithoutExt && $dir$fileNameWithoutExt",

"python": "python -u",
"ruby": "ruby",

pythonには、-u が付く

2023/08/06(日) 16:25:19.98

ゲームのBGMの中から効果音を抽出するpythonプログラムを作りたいんですが、いいライブラリとかありますか。

2023/08/06(日) 16:36:45.75

Demucsとか?

2023/08/07(月) 01:58:40.68

>>711
>>719
今更だけどはsys.argv[0]でも実行開始のファイル名取得できる
config.ini読みたい場合はそこにchdirしてから読めばいい
os.chdir(os.path.dirname(os.path.abspath(sys.argv[0])))
exe化するとexeファイルの場所と__file__が別になったりするからこれ使う

2023/08/07(月) 02:20:10.84

ちなみに今どきはSeleniumよりpyppeteerの方がいいんじゃね？

2023/08/07(月) 02:30:19.22

むしろこれか、今度使ってみよう
https://github.com/microsoft/playwright-python

2023/08/07(月) 06:45:02.83

test.pyのある場所に移動して
python test.py
とすると、sys.argv[0]はtest.pyなんだよな

2023/08/07(月) 11:26:18.20

test.pyの人はモジュール化した関数から実行開始ファイルの場所を取得して
設定ファイルとかを読みたかったみたいだけど
そもそもそういうのはmainがある場所でやって引数で渡すのが一般的

2023/08/09(水) 12:45:22.50

モミモミちんちん

2023/08/11(金) 08:50:33.66

python勉強始めて1年半かかったけど
やっと機械学習動かせるようになった

2023/08/12(土) 12:23:33.25

かっこいい

2023/08/13(日) 21:21:07.31

numpyがpypy3.9までしか対応してなくてつらい
お前ら早く3.10対応させて

2023/08/13(日) 21:41:15.56

ライブラリ作者も大変だな
勝手に上がる本体バージョンに無償で対応させられて

2023/08/13(日) 21:54:12.08

openで新規書き込みで開く時に、そのファイルを他のソフトで見てたりするとエラーになる
問答無用で書き換えるオプションとかある?

2023/08/14(月) 09:06:14.98

ファイルハンドルの一覧を取得して
OSにファイルハンドルのクローズしてもらう

2023/08/14(月) 09:19:45.83

世の中の大抵のソフトはそんなことにならずに、もう一度開くとちゃんと更新されてるんだよな
それらがいちいちそんな面倒なことをしてるとは思えなくて、pythonだけがひ弱に作られているとしか

2023/08/14(月) 09:24:08.81

「世の中の大抵のソフト」と言うオマエの物差しなんぞ誰も知らん
バッチやpower shellでも同じ結果になるだろう

2023/08/14(月) 09:27:09.98

簡単なスクリプトで試すと、特にエラーにならずに期待通りに書き込んだ
条件を似せても成功する

2023/08/14(月) 09:31:22.12

もう少し具体的に書かないとアドバイスは出てこなさそう

2023/08/14(月) 09:35:28.32

「簡単なスクリプト」

2023/08/14(月) 14:09:38.85

seleniumでスクレイピングしながら取り込んだ情報をjsonに書き出す、
というのが実際にやってた処理で、そっちではエラーになるんだけど、
普通にjsonを書くだけでは問題が起きない

ファイルサイズが大きいからかな

2023/08/14(月) 14:15:36.24

OSError: [Errno 22] Invalid argument:
のエラーになるというのがよく判らない
大抵はパスの指定が間違ってるとかが原因だけど、普段はちゃんと動くのに

2023/08/14(月) 14:24:33.26

じゃあ「普段」通りにしてないって事なんだろうな
自分で答えだしてるじゃん

2023/08/14(月) 17:43:45.04

pythonでseleniumつかってブラウザ操作して自動ログインするときについて質問させていただきたいです。

画像を選ぶタイプの認証が存在する場合はどのようにして突破すればいいでしょうか？
一応試してみたことは、

・ログイン画面に遷移した後、ユーザ名、パスワードを自動入力後、
　をsleep()を使って10秒止めている間に対象の画像を手動クリックで選択する
　そのあと10秒経ったらシステムが自動でログインボタンを押下する

・ログイン画面に遷移した後、ユーザ名、パスワードを自動入力後、
　現在のURLを取得して文字列として変数に保存(oldUrl)
　2秒に一回回すwhile内でURLを改めて取得(newUrl)をoldUrlとnewUrlを比べて
　異なるURLになったらば（ログイン後の画面に遷移できたら）
　そのwhileループを抜けて続きのブラウザ操作の処理を実行する方法

　この2つ目の方法は、whileが回っている間に画像の選択とログインボタン押下を手動で行うものとしています。

この2点を試してみましたが、うまくログイン後の画面に遷移することができませんでした。
両方法ともログインボタンはアクティブ表示になっていて、
見た目としてはクリックができてないとかそういう感じではなさそうです。

画像選択など、特別な認証が必要ない別サイトでログインを試してみましたが、ログインが可能だったので、
大まかな方法は間違っていないのかなあと思っているのですが...

なにか解決方法などご存じの方いらっしゃいましたら、ご教示いただきたいです。。。

2023/08/14(月) 19:28:02.18

ハイレベルでついていけないと言いつつ煽り文書ばっかだな
嫉妬か？

2023/08/14(月) 21:45:37.58

>>766
マウスの動き等で人間かCPUかの判断してるタイプの認証じゃね？
無駄な動きいれてみても同じかな
例えば同じ自動運転でもuwscみたいにマウスカーソルの制御もいれるとログイン出来るんじゃないだろうか

2023/08/14(月) 21:53:53.00

そのサイトを見ないと分からんのに、目隠しで想像して目的を達するモノを作れとか鬼畜…

2023/08/14(月) 21:54:32.97

マウスの動きなんかサーバには伝わってない
判断するとしてもクリック位置とタイミングから

2023/08/14(月) 22:03:05.34

from 皮肉 import ハイレベル

2023/08/14(月) 22:21:41.71

>>766
手動タスクが必要な箇所にデバッガーのブレイクポイントを入れて
ゆっくり手動タスクを実行しながらブラウザのデベロッパーツールで
DOMやHTTPリクエスト/レスポンスを確認して原因を探ればいい

まずはログインボタン押下時のHTTP POSTリクエストの状況を見てみる

2023/08/14(月) 22:37:22.37

犯罪のやり方を人に聞くようなものだよ

2023/08/14(月) 23:42:21.41

そんなやり方をオープンな場で聞くなよ
どうしてもやるなら自分の力だけでやらないと
>>773も言ってるが、他人の家や車の鍵の開け方を聞いてるのと同じだよ

2023/08/14(月) 23:49:39.71

んなこたーない

2023/08/14(月) 23:56:24.91

ちんこ維持りなら>>3をみろ

2023/08/15(火) 08:12:45.63

画像認証だけ別端末で人間がやれば？

2023/08/15(火) 08:15:08.81

余計困難になるがな

2023/08/15(火) 08:28:44.16

手動ログインした後の情報を取得しなくちゃと難しく考えて、
再度get()してしまってログイン前に戻っているとエスパー

2023/08/15(火) 08:35:53.48

おそらくpostsのほうかと思われる

2023/08/15(火) 11:03:41.51

766です。
回答くださった方も、
あんまりよろしくないのでは？とご指摘くださったも方ありがとうございました。

今回いずれの方法も画像認証の部分は完全に手動の想定で、かつアカウント自体も自分自身のものを使用していましたので、
他人の家の鍵を開けるような悪い方法でセキュリティを突破しているという意識はありませんでした...

確かに便利な技術なので、悪用してしまう方もいるかもしれませんから自動でログインすることを
画像認証は手動だったとしてもエラーを起こす高いレベルで防止している可能性はありますね...

お騒がせしてしまってすみません、みなさんありがとうございました...

2023/08/15(火) 13:21:27.20

・フリーエンジニアが年間3,600万円の売上を上げた方法を解説する
・26歳で独立して月収150万になった元引きこもりエンジニアの物語
・ブラック企業から退職し、独立後11ヶ月で“月収300万円超え”になるまでの軌跡を
　デザイナー社長船越良太に聞いてみた！
・ITフリーランスで月額単価150万円！万が一の就業不能に備える
無料の保険もある「クラウドテック」
・フリーランス時代に月収4万円→最高340万円を達成した船越さんに、
「お金」との向き合い方を聞いてみる
・フリーランスSEってどれくらい稼げるの？月単価160万円の案件を扱う定番エージェント
・フリーランスの仕事や職業の種類って何があるの？独立5年目で月収200万の僕が詳しく解説

2023/08/15(火) 21:07:08.25

>>781
seleniumよりplaywrightでstorage_stateを使ってセッション情報再利用した方が簡単だよ
ログイン処理は手動になるけど

2023/08/17(木) 00:50:23.37

ユーザ名、パスワードを自動入力する所までを、
selenium で自動操作して、

これ以後を手動にすれば？

2023/08/19(土) 13:12:32.57

データベースから取得したレコードを、requestsでどこかに投げるときって
データベースから取得した時点でセッションから抜けた方が良いと思うのだがみんなどうやってるの？

セッション開く　→　レコードを取得　→　レコードを変換して変数に格納　→　セッション閉じる
→　変数に格納されたレコードの内容をrequests.post　→　成功or失敗など
→　セッション開く　→　idなどからレコードを特定　→　レコードを更新　→　セッション閉じる

セッション開いたままだと
セッション開く　→　レコードを取得　→　レコードの内容を成型してrequests.post　→　成功or失敗など
→　レコードを更新　→　セッション閉じる
簡潔だが「成功or失敗など」の部分でtimeoutがある場合その影響が気になる

2023/08/19(土) 19:09:54.75

普段使ってないからseleniumでchromeを使ってるのに、勝手にupdateしてエラーになる
しかも116用はテスト版しか無い

2023/08/19(土) 19:11:55.30

グダグダ言う前にまず作ってみろよ

2023/08/20(日) 10:43:01.59

>>785
DBへの更新が必要なら基本コネクション維持してやってしまうな
更新時にコネクション状態をチェックして、閉じていたら再接続する処理を入れる
DBへの接続はコネクションプールを使用

2023/08/20(日) 18:05:19.16

メモ
txt.replace("条件","置換")
re.sub("条件","置換",txt)
この引数の順番間違って
re.sub("条件",txt,"置換")
ってやってしまってｲﾗｯとする
エラーでないし

2023/08/20(日) 19:01:51.69

>>789
> re.sub("条件",txt,"置換")

sed 's/条件/' txt '/置換/g'

とするような発想はなかなか得られない。誇っていい。

2023/08/20(日) 19:46:58.41

名前付き引数「…」

2023/08/21(月) 20:16:18.01

意を決してseleniumを3から4に上げる
影響むっさ少ない

2023/08/23(水) 12:10:00.22

Microsoft「Python in Excel」を発表

2023/08/23(水) 12:18:24.50

https://www.itmedia.co.jp/news/articles/2308/23/news089.html

2023/08/23(水) 12:29:49.59

猫も杓子もpythonPythonって
数値計算や機械学習ならRやc++で扱いたいわ

2023/08/23(水) 12:38:43.49

なんかR嫌い…

2023/08/23(水) 12:54:37.65

Rが適した用途はRがいいんだけど、
範囲が狭いから便利になる人が少ないんだよな

2023/08/23(水) 13:01:27.66

エクセルでpython使えるとか前から言われてたけどついにそうなったのか
mysqlやsqlite3,postgresqlなんかと違って
表示前提のRDBMSって感じ？

2023/08/23(水) 13:14:34.96

まあVBAを嫌ってた人にとっては選択肢が増えるのは喜ばしい事なんだろうな

2023/08/23(水) 13:15:00.88

RDBMSでは無い

2023/08/23(水) 13:25:21.92

まだまだ限定的な利用しか出来ないんだな
LibreOfficeとかかなり前から使えてるのに

2023/08/23(水) 13:39:23.20

excelの形式そのものがガンなんだけどな
データを読み込んでxlsxにして保存するだけで30秒とかかかる
100万行に上限がある

ちゃんと処理したいならexcelは極力避けて、人間とのIF部分だけに留めるべき
その程度ならVBAでも大した手間にはならない

2023/08/23(水) 13:43:16.41

ネットからデータ取得出来る様になってれば大分捗るな
外部アクセスは機能制限されてそうだけど

2023/08/23(水) 13:45:01.10

>>799
もうVBA覚える必要すらないんだ

2023/08/23(水) 14:08:39.22

>>804
Dim var とか変数宣言する Python かもしれないよ。Py# とか名づけられて。

2023/08/23(水) 14:49:16.09

>>800
それはわかってるよ
逆説的に、例えば「pythonで、データベース部分をmysqlで、エクセルっぽいアプリ作りました」と変わらくなってくんじゃないのってこと
詳しくは知らないけどGoogle Sheetsとかまさにそうじゃないの？

2023/08/23(水) 14:55:19.32

データベース操作有りきのpythonってことにはなりそうではある

2023/08/23(水) 14:58:39.32

そりゃまぁ表計算ソフトってどう考えても計算機能主体よりもデータベース主体で考えた方が合理的だわな

2023/08/23(水) 15:05:20.50

idスレだとあいつ一発退場になってて草

2023/08/23(水) 15:06:37.91

次はあえてpythonでゲームプログラミング周りを強化してほしい

2023/08/23(水) 15:16:40.66

excelを扱わないといけないこともあるけど、pandasとかそういういい感じのは使えない
ただの2次元配列として読み込んで、必要なデータは自力で探す

機械で素直に読めるようにと気を使うような人だったら、
最初からデータ形式にexcelを選ばんのよ

2023/08/23(水) 15:20:51.16

あくまで出力用でデータストアとしての利用は無理が

2023/08/23(水) 15:28:57.50

>>801
ほんそれ
>>805
やめれ

2023/08/23(水) 21:36:48.76

>>806
記事を見る限りはVBAやマクロの代わりにpythonが書けるようになったとしか思えないが

2023/08/23(水) 23:28:55.34

Pythonでexcel弄るのと何が違うんだ。

2023/08/24(木) 07:08:32.89

Pythonでexcel弄るのは
15年以上前から出来てるのを今更
excel上のpythonで実行する方が遅い可能性まである