当前位置:首页 > 每日看点 > 正文内容

python爬虫自学求指导!?

卡卷网11个月前 (12-24)每日看点162

我做爬虫6年了,摸着良心跟你说:别学爬虫。

爬虫是杂学,易学难精,投入产出比不成正比。

如果你只是感兴趣,了解一下就行了,scrapy框架,requets 简单学学就行。

但是如果你想成以此为生:
大致分三个方向:js逆向, android逆向,爬虫架构

  1. 架构:
    爬虫的管理,任务的管理,账号的管理,数据处理,数据监控。
  2. js逆向:
    进行JavaScript逆向工程需要掌握JavaScript编程、浏览器调试、网络通信、加密与混淆技术,以及前端框架知识和Web安全技能。
  3. android逆向:
    需要精通Java/Kotlin编程,并熟悉Android应用的结构和组件。其次,需了解反编译与反汇编技术,熟悉Dalvik字节码和Smali语言。此外,掌握调试和动态分析工具,如ADB、Android Studio、Frida等,以及网络分析工具如Wireshark和Burp Suite,能够分析应用的网络通信。了解安全和加密知识也很重要。常用工具包括APKTool、dex2jar、JD-GUI、JADX等。

但是光学这些还不够,在处理验证码的时候,还得学习自然语言处理nlp,计算机视觉CV,现在有大模型了,简单很多了,你得学习一下大模型应用落地开发,微调啥的总得懂一点吧。

真心建议别学,还有法律风险,一不小心帮信罪。爬虫就是苦逼技术工种,想暴富,就得灰黑,但凡涉及灰黑,一进去全没收。

君子谋道,不谋食。好好学你的专业吧。

可以学习一下数据分析,大模型的使用,这两项技能,能让你更好的去洞察业务中的问题。

扫描二维码推送至手机访问。

版权声明:本文由卡卷网发布,如需转载请注明出处。

本文链接:https://www.kajuan.net/ttnews/2024/12/5370.html

分享给朋友:

相关文章

国内比较好用的快速开发平台有哪些?

国内比较好用的快速开发平台有哪些?

低代码/零代码快速开发平台,一直是近年来很热的一个词,各大巨头的纷纷加入也给这个赛道。题主需要一个能二次开发的低代码快速开发平台,可以试试JVS低代码(私有化)。JVS低代码前端采用Vuex框架和Element-ui组件库,后端则基于Spr...

为什么有人觉得华为mate60只值2000?

为什么有人觉得华为mate60只值2000?

你以为买Mate60的人真的傻?真的那么爱国?国庆前,我家那傻子加价800多买了一台Mate60,当时还被我骂他是傻子。可是他说一回到公司就被老板同事朋友看到,拿去反复查看,都在惊叹他这么快就买到新机。跟亲戚朋友聚会,别人一看就知道他买的是...

鸿蒙到底是不是安卓套壳?

鸿蒙到底是不是安卓套壳?

把它是不是套壳先放在一边吧。我讲一个事情,大家自己判断。华为有一个应用,叫手机管家。这个手机管家对一些系统底层设置有影响:比如华为从 EMUI 9 开始不允许将第三方启动器设置为默认启动器,依靠的就是这个手机管家。为什么这么说呢?在网上搜索...

为什么不建议买游戏本?

我建议厂家改名厂家犯了个巨大错误:游戏本的主要受众是在校大学生,但大学生买电脑的买单人是他们的父母。你让父母给孩子买个游戏本,父母怎么想?如果你改成高效学习本、优质学习本、智能学习本、高速学习本,甚至硕博连读本,你看看家长舍不舍得砸这个钱...

你怎么看待软件测试这个工作的?

你怎么看待软件测试这个工作的?

先说一个插曲:上个月我有同学在深圳被裁员了,和我一样都是软件测试,不过他是平安外包,所以整个组都撤了,他工资和我差不多都是14K。现在IT互联网已经比较寒冬,特别是软件测试,裁员先裁测试,这几乎都是定律。我最近看了某音很多应届生以及去年毕业...

作为一名网络工程师,每天日常工作是什么样的?

作为一名网络工程师,每天日常工作是什么样的?

先介绍下我的基本情况,本人女,不知名的网络工程师一枚,入行也有三四年了。虽然我只在代理商和集成商干过,但怎么也算是“业内人士”一枚,没吃过猪肉总见过猪跑嘛。今天,就以我经历过,或者了解过的网络工程师,来给大家介绍一下到底每天的工作日常是什么...

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。