米洛❖
1 years ago
雜。

該一下。
所以大概是上一次爬的時候過度頻繁發出 requests 導致被擋,隔了超過 24 小時的現在再用同一個 code 去跑是順利的,不用拿 Selenium 自己土法煉鋼真好,謝謝 open source。
看著別人寫出完整的 side project 的同時,自己卻只在不斷參考他人,深感羞愧,但在這個情境下,這又是最有效率、最合理的做法。自己手動寫一個有效率、有系統性的 crawler 顯然並非明智之舉。
米洛❖
1 years ago
或許那時過度頻繁 access 同一個 keyword,看起來很像 DDoS?現在因為在修 code,要加其他功能,requests 送得不是很頻繁……什麼又被鎖(?????)
立即下載