Exam 考串 Study Desk
注册
← 返回专栏
免费 2021-12-03 · 1 阅读

利用python request Selenium cookies 交互DIY(爬虫)采集器

我不是在为这个八爪鱼打广告,而是有一个由来已久的副业想法,先看看技术实现。如果你对Python的爬虫技术有一定基础,那么请看: http://chromedriver.storage.googleapis.com/index.html ​…

作者 · 考串 # Python# 爬虫

 

 

 

 

我不是在为这个八爪鱼打广告,而是有一个由来已久的副业想法,先看看技术实现。如果你对Python的爬虫技术有一定基础,那么请看:

 

http://chromedriver.storage.googleapis.com/index.html​chromedriver.storage.googleapis.com/index.html

 

https://blog.csdn.net/weixin_42232219/article/details/89391932​blog.csdn.net/weixin_42232219/article/details/89391932
为爬虫获取登录cookies:使用万能钥匙 Selenium 搞定一切登录​www.yuanrenxue.com/crawler/get-login-cookies-selenium.html
Python3.6下的Requests登录及利用Cookies登录 - 西柳居士 - 博客园​www.cnblogs.com/ddddfpxx/p/8624715.html
https://blog.csdn.net/wuqing942274053/article/details/80427259​blog.csdn.net/wuqing942274053/article/details/80427259
https://blog.csdn.net/qq_38282706/article/details/80639803​blog.csdn.net/qq_38282706/article/details/80639803

好了,说思路:

既然,八爪鱼可以实现win平台的打包,那么,通过上面的技术是否也可以实现:

1.Selenium浏览器前端显示模式,爬虫所见即所得;(这里有个黑暗的功能:POST自动群发)

2.Selenium浏览器后端隐藏模式,爬虫不妨碍其他桌面工作;

3.与request交互进一步提高爬虫的效率;

4.Pyinstaller打包成为特定网站内容的爬虫(出售);

5.特定网站内容的数据(原始、清洗后),不同价出售;

6.上述实现的源码(出售)。


现代商业的本质是技术差+信息差,如果技术上你可以实现,那么信息差就不是大的问题。想要更深入探讨这个话题,可以加本主微信: