当前位置:首页 > 每日看点 > 正文内容

python爬虫自学求指导!?

卡卷网12个月前 (12-24)每日看点175

我做爬虫6年了,摸着良心跟你说:别学爬虫。

爬虫是杂学,易学难精,投入产出比不成正比。

如果你只是感兴趣,了解一下就行了,scrapy框架,requets 简单学学就行。

但是如果你想成以此为生:
大致分三个方向:js逆向, android逆向,爬虫架构

  1. 架构:
    爬虫的管理,任务的管理,账号的管理,数据处理,数据监控。
  2. js逆向:
    进行JavaScript逆向工程需要掌握JavaScript编程、浏览器调试、网络通信、加密与混淆技术,以及前端框架知识和Web安全技能。
  3. android逆向:
    需要精通Java/Kotlin编程,并熟悉Android应用的结构和组件。其次,需了解反编译与反汇编技术,熟悉Dalvik字节码和Smali语言。此外,掌握调试和动态分析工具,如ADB、Android Studio、Frida等,以及网络分析工具如Wireshark和Burp Suite,能够分析应用的网络通信。了解安全和加密知识也很重要。常用工具包括APKTool、dex2jar、JD-GUI、JADX等。

但是光学这些还不够,在处理验证码的时候,还得学习自然语言处理nlp,计算机视觉CV,现在有大模型了,简单很多了,你得学习一下大模型应用落地开发,微调啥的总得懂一点吧。

真心建议别学,还有法律风险,一不小心帮信罪。爬虫就是苦逼技术工种,想暴富,就得灰黑,但凡涉及灰黑,一进去全没收。

君子谋道,不谋食。好好学你的专业吧。

可以学习一下数据分析,大模型的使用,这两项技能,能让你更好的去洞察业务中的问题。

扫描二维码推送至手机访问。

版权声明:本文由卡卷网发布,如需转载请注明出处。

本文链接:https://www.kajuan.net/ttnews/2024/12/5370.html

分享给朋友:

相关文章

手机买16+256的还是12+512的好?

手机买16+256的还是12+512的好?

到底选大内存还是大存储,一直以来是很多朋友的纠结点,大内存意味着可以应用多开不卡顿,大存储则是可以存入更多文件、应用,如果两个配置价格差距不大(如0-200元),确实有点难选。 不过从实际体验出发,大存储的手机显然更应该优先选择才是。首先,...

为什么我感受不到 1500 元的手机比四五千的差?

我长期使用两千元左右的安卓机,一天接近8小时的重度手机使用者。某天我突然想试试看传说中非常赛艇的苹果。狠了心,砸了钱。七千大样买了爱疯。就这?什么辣鸡玩意。而且因为我一直更新软件,用了两年爱疯就卡了。并没有传说中的用四五年不卡。用了这么一次...

我觉得华为Mate60Pro明明配置不高,为什么还是有那么多人买呢?

我也好奇啊,所以闲聊时,我问了我们公司的副总,我说Mate60pro配置这么拉胯你怎么还买啊?他一脸疑惑的看着我,配置?什么配置?我这手机信号挺好的啊?我们总经理用的是去年华为出的折叠手机,花了一万多,我也想问问他同样的问题,但奈何一直没有...

台积电通知其中国客户,从下周开始,所有 7nm 及以下芯片出货将停止。如何看待这一行为?

台积电通知其中国客户,从下周开始,所有 7nm 及以下芯片出货将停止。如何看待这一行为?

我说美国快要没招了,你信么?这次台积电宣布停止向中国大陆客户供应7纳米及更先进AI芯片,再加上前段时间台积电对华为的制裁,我们基本可以认为,台积电在高端芯片领域,已经彻底把大陆给拉黑了,这也意味着中美芯片战已经到了最关键的时刻,一旦我们克服...

如何做电商行业?

如何做电商行业?

“如何做电商*开网店”跟“如何找老婆”一样,没概况条件、没明确标准,就是扯犊子。我把话题具体一点说:具备“两三万”启动资金、掌握“选品+上架优化”基础技能,小则月入三五千、多则上万。跟摆地摊一样,有进货的钱、也不怕苦不怕累、稍微有点生意头脑...

拼多多百亿补贴买手机电脑等数码产品靠谱吗?

大家很多人都在问pdd百亿补贴购机靠谱吗?首先声明一下,我不是pdd的人,我只是一个普普通通混迹从事pc行业的数码玩家,我只是在评论区看到很多人都在无脑推百亿补贴,特地发一条怗子来说明一下这个东西。此怡不存在偏向引导,此站仅站在我个人角度上...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。