当前位置:首页 > 每日看点 > 正文内容

自学半年python,啥也不会,求大神指点?

卡卷网12个月前 (03-31)每日看点205

别偷懒,学习方向不对。

以python爬虫学习路径为主。

基础可以是填鸭式学习,不用太过纠结。

技术栈就是:requests+xpath(或者bs4) 然后整个数据库,mongodb或者MySQL都可以。

框架的话就是scrapy,分布式、增量式学一波,把部署还有scrapy-redis学一学,全站scrapycarwl的话可学可不学,鸡肋,主要是scrapy-redis redis也是数据库,可以一起用。

这是爬虫的基础,可以吃饭的基础。

学完这一波之后,没什么太多的事情可以做,毕竟现在都是加密时代。

selenium可以学,但是基本上被淘汰了,也不算被淘汰吧,还有一定的用处,只是不用花太多的心思。

学到这里,往上深入就是逆向JS,滑块啊,登录啊,验证码啊。

把逆向JS会点了,大部分网站可以搞了,恭喜你,可以吃这一碗饭了。

不过嘛~app逆向就等着你了,学会这玩意儿让你吃的更饱,这一块又涉及到另外一个领域了。

爬虫的话,爬虫简单,主要是js和app逆向困难,难也就难在这里,赚钱也赚钱在这里。

学完这些,基本上2-3年起步,学无止境,毕竟逆向和正向是攻防的阶段。


如果还是不理解的话,提炼一下内容,一眼清晰。

初级:requests、xpath、bs4、re

mongodb、mysql、redis

中级:scrapy、scrapy-crawl、scrapy-redis 增量式爬虫、分布式爬虫

验证码、滑块、代理池

高级:逆向JS、逆向APP

扫描二维码推送至手机访问。

版权声明:本文由卡卷网发布,如需转载请注明出处。

本文链接:https://www.kajuan.net/ttnews/2025/03/12133.html

分享给朋友:

相关文章

百度收录又开始“作”了,用“快速抓取”替代“快速收录”

百度收录又开始“作”了,用“快速抓取”替代“快速收录”

作为国内不得不用的知名搜索引擎“百度”,对于网站收录的规则,又有新的升级。以前有个快速收录,我们可以通过WordPress插件,免费快速提交给百度。但是现在这个功能没了,取而代之的是“快速抓取”,如下图想要使用此功能,需要加入“VIP俱乐部...

有哪些好用不火的软件?

有哪些好用不火的软件?

20个无敌冷门的小众APP,好用到内存爆了都不想卸载,个个是宝藏!特别是第4、13、19个,大多数人都没玩过~喜欢可以双击屏幕取走哦~1、【毒汤日历 】 – 你的每日快乐源泉[iPhone/Android]好用指数:⭐⭐⭐⭐⭐下载地址:各...

想要在双 11 换一台全面无短板的新手机,有没有「闭眼买」的机型推荐?

想要在双 11 换一台全面无短板的新手机,有没有「闭眼买」的机型推荐?

最近一个月各大手机厂商的旗舰机扎堆发布,不知道大家看爽了没?这一代的性能续航大提升,最低 3599 元就能买到,同时老款也有不小的降幅,今年双 11 算是相当适合换手机的节点了!这次,小黑就给大家推荐双 11 期间值得购买的手机...150...

有哪些网站,一旦知道,你就离不开了?

有哪些网站,一旦知道,你就离不开了?

这六个网站,一旦用过,基本上是离不开了。都是我超爱的一些网站,基本上每天都用。1 地图生成器第一个,我要给大家推荐的是地图生成器。可以下载到各省,各市,各县的svg格式的地图素材。这些素材导入PPT中都是可以编辑的。可以单独更改颜色和轮廓。...

有哪些是你用上了mac才知道的事?

用上了高端的Mac(已退货)才知道:原来文件夹里面的文件,你看到是8个,其实可能有12个。其中3个图标重叠在一起了,另外一个被拖动到屏幕外面了。用上了高端的Mac(已退货)才知道:原来鼠标灵敏度有问题是因为系统内置了鼠标加速度,只能用控制台...

如何看待 Luv Letter 表示影视飓风专业性实在是让人失望?

一点儿新进展,另外以下有部分需要关注对于统一变量的问题。这个我在对比上面有写小字解释,我在一开始使用ffmpeg来控制变量。但是发现了不少问题,比如因为遗留bug,会强制将非整数帧的素材转码为VFR导致无法正确帧间对比,因此不考虑,同时尽量...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。