今天是2025.3.18号，我来回答一波。
我近期利用python开发的微博搜索爬虫，已经上线了，技术栈主要采用的：
tkinter：GUI软件界面
requests：爬虫请求
BeautifulSoup：解析响应数据
pandas：保存csv结果、数据清洗
logging：日志记录
这是常见的爬虫开发框架组合，当然同样也适用于微博的网页端。如果哪位小伙伴利用这个技术爬取发现中途失败了，那一定是反反爬没有处理好，技术功底还需要打磨。
完整介绍可移步：
【爬虫工具】2025微博采集软件，根据搜索关键词批量爬帖子，突破50页限制！除了这个通过搜索关键词爬取微博帖子数据的工具，我还开发了一些其他的源码或软件，包括爬取微博签到、爬取微博评论等，可以跟我链接交流~
面试官心理分析这个问题是肯定要问的，说白了，就是看你有没有实际干过 es，因为啥？其实 es 性能并没有你想象中那么好的。很多时候数据量大了，特别是有几亿条数据的时候，可能你会懵逼的发现，跑个搜索怎么一下 5~10s ，坑爹了。第一次搜索的...
一点儿新进展，另外以下有部分需要关注对于统一变量的问题。这个我在对比上面有写小字解释，我在一开始使用ffmpeg来控制变量。但是发现了不少问题，比如因为遗留bug，会强制将非整数帧的素材转码为VFR导致无法正确帧间对比，因此不考虑，同时尽量...
之前看到过一句话，好像是 Bourgain 说的，大意是做 ode 的做到深处就到了 pde，做 pde 的做到深处就到了 ode，ode 和 pde 最后是相通的。以我目前有限的知识，只知道下面两个方向：1. Hamilton 系统在现代...
我估计，整个知乎，可能没有比我公司再小得了，。。正对面就是我唯一的一个员工的工位。为啥留不住人。因为那些留不住人的老板，太拿自己当回事。大公司靠制度。小公司靠人情。我这儿的业务，因为全都是线上，所以员工来不来坐班都不重要。天太热可以不来，下...
哈，我二十岁的时候也这么狂。想当年，我一个大二学生，在宿舍里写出一本大精品，月入两万五，在学校里走路都是横着的，游戏卡池一开，看都不看，氪到出货为止。iPhone12pro一发布直接买，还买了个iPad Pro，都是官网直接买的，Apple...
先说一个插曲：上个月我有同学在深圳被裁员了，和我一样都是软件测试，不过他是平安外包，所以整个组都撤了，他工资和我差不多都是14K。现在IT互联网已经比较寒冬，特别是软件测试，裁员先裁测试，这几乎都是定律。我最近看了某音很多应届生以及去年毕业...
