V2EX › nullboy 的所有回复 › 第 24 页 / 共 27 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

1 ... 16 17 18 19 20 21 22 23 24 25 ... 27

❮

❯

2019 年 9 月 24 日

回复了 Macolor21 创建的主题 › 程序员 › Spotify 是如何做到手机切换电脑的歌曲的.

手机上发送微信，电脑上居然收到了.............

2019 年 9 月 24 日

回复了 Tiera 创建的主题 › Linux › 为什么使用 httpd 做正向代理,客户端打不开任何网站?

为啥要这个搞代理？安装一个代理服务不行？

2019 年 9 月 23 日

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

@ClericPy 我的爬虫放在阿里云上，阿里云 ip 被网站封掉了，然后我在自己家本地搭了一个代理服务，阿里云代理到家里宽带爬取数据，还有一个定时任务，如果监控到 ip 被封，通过 shell 命令重启路由器，重新获取 ip。
另外，个人感觉，selenium 出到 3 之后比以前稳定多了。什么程序挂掉，内存泄漏啥的，自己的程序做好异常处理不就完事了。算了，不说了

2019 年 9 月 23 日

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

代理自己部署一个 squid，然后在 chrome_options 中指定代理
chrome_options.add_argument('--proxy-server=http://xxxxxx:4128')

2019 年 9 月 23 日

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

@neoblackcap 无法修改 UA??????????
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument("user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36")
driver = webdriver.Chrome(options=chrome_options)

2019 年 9 月 23 日

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

@neoblackcap 部署困难？用 docker 啊，remote driver https://github.com/SeleniumHQ/docker-selenium
功能限制怎么讲？

说内存泄漏的，多半是浏览器没关掉

2019 年 9 月 19 日

回复了 kaiyiliu123 创建的主题 › Java › 迷茫…转行程序员 3 年，该会什么技术？

为啥要人带？
----------------------------
"三年没人带"

2019 年 9 月 18 日

回复了 nyaruko 创建的主题 › 宽带症候群 › 悲报，江苏联通的 443 端口，不通了

我昨天就挂了。发了贴被移动到水深火热里了....

2019 年 9 月 18 日

回复了 Renco 创建的主题 › 程序员 › 测试人员对于一个项目的作用有多大，为什么公司不请专门的测试人员进行测试，让开发人员和业务人员自己测.

作为一个测试人员，来这个公司快一年了就没测试啥项目。一直在搞爬虫...