当前位置:首页 > 每日看点 > 正文内容

python爬虫自学求指导!?

卡卷网1年前 (2024-12-24)每日看点197

我做爬虫6年了,摸着良心跟你说:别学爬虫。

爬虫是杂学,易学难精,投入产出比不成正比。

如果你只是感兴趣,了解一下就行了,scrapy框架,requets 简单学学就行。

但是如果你想成以此为生:
大致分三个方向:js逆向, android逆向,爬虫架构

  1. 架构:
    爬虫的管理,任务的管理,账号的管理,数据处理,数据监控。
  2. js逆向:
    进行JavaScript逆向工程需要掌握JavaScript编程、浏览器调试、网络通信、加密与混淆技术,以及前端框架知识和Web安全技能。
  3. android逆向:
    需要精通Java/Kotlin编程,并熟悉Android应用的结构和组件。其次,需了解反编译与反汇编技术,熟悉Dalvik字节码和Smali语言。此外,掌握调试和动态分析工具,如ADB、Android Studio、Frida等,以及网络分析工具如Wireshark和Burp Suite,能够分析应用的网络通信。了解安全和加密知识也很重要。常用工具包括APKTool、dex2jar、JD-GUI、JADX等。

但是光学这些还不够,在处理验证码的时候,还得学习自然语言处理nlp,计算机视觉CV,现在有大模型了,简单很多了,你得学习一下大模型应用落地开发,微调啥的总得懂一点吧。

真心建议别学,还有法律风险,一不小心帮信罪。爬虫就是苦逼技术工种,想暴富,就得灰黑,但凡涉及灰黑,一进去全没收。

君子谋道,不谋食。好好学你的专业吧。

可以学习一下数据分析,大模型的使用,这两项技能,能让你更好的去洞察业务中的问题。

扫描二维码推送至手机访问。

版权声明:本文由卡卷网发布,如需转载请注明出处。

本文链接:https://www.kajuan.net/ttnews/2024/12/5370.html

分享给朋友:

相关文章

现在做抖音的话,还有机会嘛?

现在做抖音的话,还有机会嘛?

之前我问过小杨哥一个问题:“现在抖音还好做吗?”疯狂小杨哥在抖音已经突破1亿粉丝,直播间10w的在线观看人数,日常带货随便一场也是上7位数的数据。现在抖音的市场好像已经被头部占领,资源靠前,普通人似乎已经没有机会了?下面是小杨哥对于做抖音的...

现在手里有一万闲钱,买什么币好?

今天是2024年7月29日,看看我的持仓吧。只有几百刀的那些微持仓就不说了,以下持仓都在几千刀~几万刀不等。不构成任何投资建议,成本是多次买入的大致均摊成本$TIA 成本0$DYM 成本0 $SAGA 成本0$STRK 成本0$ETHFI...

为何 Linus 一个人就能写出这么强的系统,中国却做不出来?

为何 Linus 一个人就能写出这么强的系统,中国却做不出来?

我给你举个真实的例子。。有一个人叫高伟东,在哈尔滨工作。在2012年做了一个APP。使用词根词缀背单词。名字叫:词根词缀词典这个人编辑了2300余条词根,给10万多条单词建立了词根索引,整理了50多万条的单词记忆方法,包括新版本的诸多新功能...

荣耀magic 7 首发的应该都收到货了,感觉怎么样?

8号入手magic7,跟mate40pro比。优点:1、电池真耐用,充电块,华为电池也是新换的但是明显荣耀耐用;2、系统明显快多了,mate40pro下半年开始卡的不行,实在受不了了。3、声音、震动效果提升明显,指纹反应灵敏很多。 缺点:1...

有没有能够兼顾便携并且流畅运行各种AI应用的笔记本?求推荐?

有没有能够兼顾便携并且流畅运行各种AI应用的笔记本?求推荐?

看了下题主的描述,可以考虑「联想YOGA Air 15 Aura AI元启版」,今年9月底出的一款轻薄本,也通过了英特尔Evo严苛认证。处理器用了英特尔最新的「酷睿 Ultra 7 258V」,主要亮点就是AI性能、图形处理能力和能效,很适...

想入个键盘,想买机械的但是太贵,求知友推荐一款手感比较好的薄膜键盘?

想入个键盘,想买机械的但是太贵,求知友推荐一款手感比较好的薄膜键盘?

相信很多接触过286的90后朋友都和我有一样的体会,以前的机械键盘真的是让人头皮发麻,不仅敲击要非常用力,而且很吵。所以后面随着大家的生活消费水平的上升,家家户户都有电脑了,自然也不想再用打字来宣扬自己有电脑的优越感,基本上大家都换成了又轻...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。