Pythonのお勉強 Part53 [無断転載禁止]©2ch.net

**デフォルトの名無しさん** · 2017/05/13(土) 22:48:04.14

Pythonオフィシャルサイト
http://www.python.org/

まとめWiki
http://python.rdy.jp/
関連スレ
http://find.2ch.net/?BBS=ALL&;TYPE=TITLE&STR=python
日本Pythonユーザ会 (※英語わかる人は上記のオフィシャルの方を見ることをお薦めします)
http://www.python.jp/

日本語の扱いで戸惑ったらこちらをどうぞ（バッドノウハウ集で笑える）
ttp://speirs.blog17.fc2.com/blog-entry-4.html
ttp://atomic.jpn.ph/prog/etc/encode.html
ttp://d.hatena.ne.jp/kakurasan/20100330/p1

PythonのUnicodeEncodeErrorを知る
ttp://lab.hde.co.jp/2008/08/pythonunicodeencodeerror.html
よくまとまってた。あとで読む

■前スレ
Pythonのお勉強 Part52
http://echo.2ch.net/test/read.cgi/tech/1483756857/

**デフォルトの名無しさん** · 2017/07/27(木) 10:20:45.43

>>656
あっちで聴け
http://medaka.2ch.net/php/

**デフォルトの名無しさん** · 2017/07/27(木) 11:46:28.49

>>656
feedparserでRSSフィードを取得するほうが良かろうもん

**デフォルトの名無しさん** · 2017/07/27(木) 12:15:40.57

まあクロール禁止だからなｗ
そのためのAPIなわけだし。

**デフォルトの名無しさん** · 2017/07/27(木) 12:22:43.59

>>656
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

wait = WebDriverWait(driver, 30)

↑これは最初だけ
↓これはgetの度に入れる
wait.until(EC.presence_of_all_elements_located)

**デフォルトの名無しさん** · 2017/07/27(木) 13:36:14.44

>>656
素直に'https://news.yahoo.co.jp/hl?c=c_ent'にアクセスすれば良いと思いますっ！
ヤフトピと同じ内容でっす！

**デフォルトの名無しさん** · 2017/07/27(木) 13:53:35.87

つまりヤフートップからエンタメのリンク先にアクセスして、『エンタメ』の項目を
取得すればいいかと・・

**デフォルトの名無しさん** · 2017/07/27(木) 14:09:35.33

あっ、いや・・seleniumからアクセスするんじゃなくて・・その静的ページをですね・・
その・・ヤフートップからエンタメのリンク先は見えるわけじゃないですか！
レンダリング前の情報でエンタメのリンク先は見えるわけで、、その、リンク先をですね
アクセスしていけば、、その、、selenium使わなくても取得できるって思って、、その、あの・・

**デフォルトの名無しさん** · 2017/07/27(木) 14:24:35.19

スクレイピングでseleniumが必要になったことなんて
10年以上やってても両手の指より少ない

**デフォルトの名無しさん** · 2017/07/27(木) 15:51:31.16

１０年前にseleniumはありません

**デフォルトの名無しさん** · 2017/07/27(木) 16:05:18.82

scrapy 以外にcookieとか処理してくれるのってあるの?

**デフォルトの名無しさん** · 2017/07/27(木) 16:17:17.36

標準でcookieの処理もできないのはurllibくらいでしょ

**デフォルトの名無しさん** · 2017/07/27(木) 17:03:59.58

１５年前からPython一筋だが本職じゃないから不遇

**デフォルトの名無しさん** · 2017/07/27(木) 18:09:19.53

jsで動的ページはselenium必要じゃないかしら。