当前位置:首页 > 每日看点 > 正文内容

python爬虫自学求指导!?

卡卷网1年前 (2024-12-24)每日看点198

我做爬虫6年了,摸着良心跟你说:别学爬虫。

爬虫是杂学,易学难精,投入产出比不成正比。

如果你只是感兴趣,了解一下就行了,scrapy框架,requets 简单学学就行。

但是如果你想成以此为生:
大致分三个方向:js逆向, android逆向,爬虫架构

  1. 架构:
    爬虫的管理,任务的管理,账号的管理,数据处理,数据监控。
  2. js逆向:
    进行JavaScript逆向工程需要掌握JavaScript编程、浏览器调试、网络通信、加密与混淆技术,以及前端框架知识和Web安全技能。
  3. android逆向:
    需要精通Java/Kotlin编程,并熟悉Android应用的结构和组件。其次,需了解反编译与反汇编技术,熟悉Dalvik字节码和Smali语言。此外,掌握调试和动态分析工具,如ADB、Android Studio、Frida等,以及网络分析工具如Wireshark和Burp Suite,能够分析应用的网络通信。了解安全和加密知识也很重要。常用工具包括APKTool、dex2jar、JD-GUI、JADX等。

但是光学这些还不够,在处理验证码的时候,还得学习自然语言处理nlp,计算机视觉CV,现在有大模型了,简单很多了,你得学习一下大模型应用落地开发,微调啥的总得懂一点吧。

真心建议别学,还有法律风险,一不小心帮信罪。爬虫就是苦逼技术工种,想暴富,就得灰黑,但凡涉及灰黑,一进去全没收。

君子谋道,不谋食。好好学你的专业吧。

可以学习一下数据分析,大模型的使用,这两项技能,能让你更好的去洞察业务中的问题。

扫描二维码推送至手机访问。

版权声明:本文由卡卷网发布,如需转载请注明出处。

本文链接:https://www.kajuan.net/ttnews/2024/12/5370.html

分享给朋友:

相关文章

有了Istio,开发还需要微服务架构吗?

有了Istio,开发还需要微服务架构吗?

Istio 是一个开源的服务网格(Service Mesh),通过它可以实现对服务间通信的管理和监控。对于那些本身没有设计为具备安全功能的传统应用程序,Istio 可以提供一个“透明”的安全保护层,而不需要对应用本身进行任何代码修改。 I...

抖音和快手最大的区别是什么?

1、目标人群定位不同抖音:一二线城市,占比52%,大专学历以上,女性偏多。抖音以年轻群体居多。快手:三四线城市,占比64%,高中学历以下,男女更均衡。快手所覆盖的年龄段范围更广。2、内容创作的形式和深度不同抖音:偏深层,内容的装饰及表达更高...

为什么工资五千的人会一下花八九千买手机呢?

这其实是一个何不食肉糜的问题,这个问题其实很现实,越是月薪5000越需要高档手机。 前段时间看了一个纪录片,讲外卖小哥都用什么手机,结果发现绝大多数外卖小哥用的手机都是旗舰机型,有的时候宁可买二手也要买旗舰。 因为1外卖小哥对ip6...

有哪些是你用上了mac才知道的事?

用上了高端的Mac(已退货)才知道:原来文件夹里面的文件,你看到是8个,其实可能有12个。其中3个图标重叠在一起了,另外一个被拖动到屏幕外面了。用上了高端的Mac(已退货)才知道:原来鼠标灵敏度有问题是因为系统内置了鼠标加速度,只能用控制台...

为什么这次 Mac mini 的 M4 版本价格这么低?

为什么这次 Mac mini 的 M4 版本价格这么低?

扫了一眼这里的回答,目测没几个人真买过 Macbook、Mac mini且真正当主力工作机用过。这个初始(丐版)版本的机器实际谈不上多便宜,备受热捧有几个原因。它这代产品整体做了重新设计,大幅缩减了尺寸,真正称得上 Mini 了。对比前代,...

阿里云服务器续费价格好贵,想换一家云服务厂商,该怎么选择?

阿里云服务器续费价格好贵,想换一家云服务厂商,该怎么选择?

最近一台买了3年时间的腾讯云轻量服务器到期了,还有5天时间。当时买的价格是3年198元。配置是2核CPU、4GB内存,80GB SSD云硬盘,1200GB 流量包,然后中途给免费升级了CPU,从2核变成了4核。平均下来一年的费用70元不到,...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。