当前位置:首页 > 每日看点 > 正文内容

python爬虫自学求指导!?

卡卷网1年前 (2024-12-24)每日看点225

我做爬虫6年了,摸着良心跟你说:别学爬虫。

爬虫是杂学,易学难精,投入产出比不成正比。

如果你只是感兴趣,了解一下就行了,scrapy框架,requets 简单学学就行。

但是如果你想成以此为生:
大致分三个方向:js逆向, android逆向,爬虫架构

  1. 架构:
    爬虫的管理,任务的管理,账号的管理,数据处理,数据监控。
  2. js逆向:
    进行JavaScript逆向工程需要掌握JavaScript编程、浏览器调试、网络通信、加密与混淆技术,以及前端框架知识和Web安全技能。
  3. android逆向:
    需要精通Java/Kotlin编程,并熟悉Android应用的结构和组件。其次,需了解反编译与反汇编技术,熟悉Dalvik字节码和Smali语言。此外,掌握调试和动态分析工具,如ADB、Android Studio、Frida等,以及网络分析工具如Wireshark和Burp Suite,能够分析应用的网络通信。了解安全和加密知识也很重要。常用工具包括APKTool、dex2jar、JD-GUI、JADX等。

但是光学这些还不够,在处理验证码的时候,还得学习自然语言处理nlp,计算机视觉CV,现在有大模型了,简单很多了,你得学习一下大模型应用落地开发,微调啥的总得懂一点吧。

真心建议别学,还有法律风险,一不小心帮信罪。爬虫就是苦逼技术工种,想暴富,就得灰黑,但凡涉及灰黑,一进去全没收。

君子谋道,不谋食。好好学你的专业吧。

可以学习一下数据分析,大模型的使用,这两项技能,能让你更好的去洞察业务中的问题。

扫描二维码推送至手机访问。

版权声明:本文由卡卷网发布,如需转载请注明出处。

本文链接:https://www.kajuan.net/ttnews/2024/12/5370.html

分享给朋友:

相关文章

网易云音乐里有哪些打动你的评论?

1.“如果我被强奸了,有人说我会失去贞操。”“我怎么失去贞操了呢?” “我的贞操不在我的阴道里。”“失去贞操的是强奸犯,而不是被强奸的人。”2.但要记得那年海边的烟火,我们不拘一格 ,嘲笑过生活。………网易云热评《这样就很好》3.“ 我们在...

用红米手机会很丢人吗?

前些日子遇到了一位快递小哥,京东的,签收小哥年纪不算大,目测二十多岁他的手机上全是一道道极严重的划痕,有点卡,他开热点了,热点名就是手机型号,红米9a,我父母的同款现在他那边操作了一会,然后又是我这边操作了一会小哥看着我手机刷刷的,颇有些好...

如何判断 Java 工程师的基础知识是否扎实?

我来给你出几道大题,能答对70%,你就算基础扎实了。第一部分 Java基础(27)1. 程序本质:代码是如何被执行的?CPU、操作系统、虚拟机各司何职?2. 基础语法:从CPU角度看变量、数组、类型、运算、跳转、函数等语法3. 引用类型:同...

PHP承载百万/天 访问量需要用到什么技术?

当年做一个百万PV的商城,也不过是两台2c4g的阿里云虚机罢了(其实一台就够,另外一台主要的逼着大家一定开发的时候一定要有负载均衡和横向扩容的意识)。当时框架还是Thinkphp3.2,框架提高运行效率的开关全打开,标准的lnmp模式,单机...

大家都是怎么把自己的粉丝增加到1000的呢?

大家都是怎么把自己的粉丝增加到1000的呢?

截至2024年10月30日,关注者总数1137人,用时80天,增速约14人/天。2024年10月30日数据2024年8月10日开始创作,连续一周,1个关注者都没有。创作第7天,得到第一个关注,7天时间,写了8篇回答。当天得到关注,激动的心情...

想入个键盘,想买机械的但是太贵,求知友推荐一款手感比较好的薄膜键盘?

想入个键盘,想买机械的但是太贵,求知友推荐一款手感比较好的薄膜键盘?

相信很多接触过286的90后朋友都和我有一样的体会,以前的机械键盘真的是让人头皮发麻,不仅敲击要非常用力,而且很吵。所以后面随着大家的生活消费水平的上升,家家户户都有电脑了,自然也不想再用打字来宣扬自己有电脑的优越感,基本上大家都换成了又轻...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。