lixi5338619 / lxspider

爬虫案例合集。包括但不限于《淘宝、京东、天猫、豆瓣、抖音、快手、微博、微信、阿里、头条、pdd、优酷、爱奇艺、携程、12306、58、搜狐、各种指数、维普万方、Zlibraty、Oalib、小说、招标网、采购网、小红书、大众点评、推特、脉脉、知乎》

lxSpider

爬虫案例合集。包括但不限于《淘宝、京东、天猫、豆瓣、抖音、快手、微博、微信、阿里、头条、pdd、优酷、爱奇艺、携程、12306、58、搜狐、各种指数、维普万方、Zlibraty、Oalib、小说网站、招标采购网、小红书、大众点评、推特、脉脉》

简介：

• 

• 时光荏苒，记不清写了多少案例了。个人博客：www.lxspider.com

• 微信公众号：pythonlx

• 新书 《爬虫逆向进阶实战》 已经上市，附带140分钟逆向案例教学视频！

• B站 视频案例教程

声明：

• 本库以教学为基准、本库提供的可操作性不得用于任何商业用途和违法违规场景。

• 作者对任何原因在使用本库中提供的代码和策略时可能对用户自己或他人造成的任何形式的损失和伤害不承担责任。

• 因本库引起的或与之有关的任何争议，各方应友好协商解决，协商不成的任何后果与作者无关。

• 如有侵权，请联系我进行删除。

---

个人博客

各种版权问题导致部分文章已经无法在CSDN浏览，所以后续更多内容更新在个人博客中，另外有爬虫逆向辅助工具

博客：lxspider.com

工具：cnlans.com/lx/tools

---

专栏

网络爬虫基础 ： 适合有python语法基础 准备学爬虫的同学

web逆向基础 ： 有爬虫经验即可（包含猿人学爬虫题目解析）

安卓逆向基础 ：工具介绍、逆向记录、案例分享

爬虫案例合集 ：付费专栏、经典案例、持续更新

---

目录

• 论文网站
• 招标网站
• 抖音
• 微博
• 微信公众号
• 小说网站
• 天眼查
• 京东
• 阿里1688
• 58同城
• 豆瓣Sign
• ...

博客

• 抖音signature网页版
• 抖音xgorgon生成
• 万方protobuf协议
• 闲鱼抓包案例
• 数美滑块验证码分析
• 淘宝h5-sign值生成
• 1688以图搜图案例
• 快手web弹幕采集
• 微博指数爬虫
• 微信公众号文章采集
• 今日头条as-cp-sign
• 优酷评论sign值生成方法
• 选哪儿网动态字体映射案例
• 趣头条app sign
• 某路黔寻小程序sign
• 抖店signature

推荐

• Asyncpy协程爬虫框架

交流

关注公众号《pythonlx》可获取群聊二维码！

lxspider's Issues

小白提问 No such file or directory: 'zw.wav' Unable to display frame variables

大大您好 不好意思打扰你了 我在使用语音识别时出现了这两个错误 百度第二个问题，说要调设置 但我的设置没有那个选项。
没有识别那个输出框出来。谢谢您。

报错

D:\dev\python\python3.11.3\python.exe D:\Users\asus\Desktop\语音识别\iat_ws_python3_demo\实时语音转写\yuyinTransfer.py
D:\Users\asus\Desktop\语音识别\iat_ws_python3_demo\实时语音转写\yuyinTransfer.py:181: DeprecationWarning: setDaemon() is deprecated, set the daemon attribute instead
t.setDaemon(True)

error: Handshake status 401 Unauthorized

请问这是什么意思

万方的数据翻页问题

万方数据翻页好像不生效，还是采集第一页的数据

咸鱼？

xhs账号被禁

有没有小伙伴遇到爬取xhs作品页出现账号被禁的情况

万方

万方爬虫用不了了，遇到application/grpc-web+proto这种该如何解决，希望作者能出个案例，非常感谢

小红书

微信小程序端的小红书好像用户搜索功能，好像用不聊了

报错401

Handshake status 401 Unauthorized握手不成功

Handshake status 401 Unauthorized

请问语音 您提供的语音转写程序运行后出现：Handshake status 401 Unauthorized
可能是哪里出问题了呢？

火山翻译

求逆向一下这个网站https://translate.volcengine.cn/translate?keyword=%E6%88%91%E6%98%AF%E4%B8%AD%E5%9B%BD%E4%BA%BA&transFrom=detect&transTo=en
非常感谢

您好 我有一些关于实时语音转文字的问题

您好我想问一下这个是为什么呀

推特中不能通过username得到id，得到的是None

小红书？