共计 847 个字符,预计需要花费 3 分钟才能阅读完成。
原来一直使用火车头,那时的业务用火车头也是绰绰有余,进来火车头已经不能满足业务需求,开始需求替代方案,江湖一直传闻 python 爬虫写的好,牢饭管到饱,也想试试,就开始狂啃 python 相关知识。
吸收了一下 python 知识,开始动手写爬虫,真的是不写不知道,一写爽到爆!短短几行代码 即优雅又美观,效率又高,真的后悔这么久才开始用 python 写爬虫。 大佬们有什么爬虫好的教程吗? 目前看的教程有点乱,什么都来一点,这个爬虫就是东拼西凑出来的,目前还未完全理解所有流程,找一个爬虫系统的学习下,加深理解,好为牢饭管饱,打下深厚的基础!3Q |
网友回复:
注册 : 其实就是两行就行了。import requests res = request.get(“https://www.baidu.com”)
Far: 贴出你的几行即优雅又美观,效率又高的代码,让我等感受下
hpp: +1,我也学习学习
莆田郑少斌 : +1,我也学习学习
深海空间 : 这是怕一个人进去寂寞,组队喊 MJJ 一起上
body: python 网络爬虫从入门到 … 入刑。。。明日科技 吉林大学出版社。
东风破 : 贴出来 我借鉴借鉴!!!!!!!!
mingfeng: 这是准备团伙作案
有 JJ 的男人 : 垃圾中的垃圾
注册 : Python 效率比火车头高的话,必须是 scrapy 框架才行,几行代码怕是搞不定
注册 : 火车头不是说也是按照 python 搞的吗
zqm840527: 大兄弟,火车头运行少量规则或采集规则写的不复杂的勉强还可以吧,一旦量上来了,火车头和 python 根本就没有可比性。火车头我用 8 年了,火车头是什么吊样我一清二楚,大多数人用火车头都是浅用,或者是一些没啥编程基础的人用,他们的使用量会有多大?当然发现不了火车头的极限。
hins: 贴出来借鉴借鉴
Far: 爬虫,为何要限制语言呢?一直搞不明白。。。不就是个获取网页源代码的过程么,哪个开发工具做不到。。。
kezhao: 爬虫的重点是怎么过反爬
jsxx: 代理,UA,Ref。。。tock。。。
acpp: 什么项目分享一下啊。