html video blob视频下载 2026年03月30日 daichangya 14 HTML Video Blob 视频下载目前网络视频流普遍采用 m3u8 格式，通常表现为 Blob 链接。只需获取到实际的 m3u8 地址，即可进行视频下载。手动获取 m3u8 地址打开 Chrome 开发者工具（Developer Tools），然后... 阅读全文 0 评论
怎么使用Java实现一个爬虫框架 2026年03月30日 daichangya 17 编者注：本文为历史博文归档；涉及 JDK、框架与工具链版本请以当前官方文档为准。引用外链图片可能失效，阅读时请注意时效性。项目简介：crawler-mousecrawler-mouse 是一个基于 Java 实现的轻量级爬虫框架。该框架旨在简化网络数据采... 阅读全文 0 评论
如何构建一个通用的垂直爬虫平台？ 2026年03月30日 daichangya 15 之前做爬虫时，在公司设计开发了一个通用的垂直爬虫平台，后来在公司做了内部的技术分享。这篇文章把整个爬虫平台的设计思路整理了一下，分享给大家。写一个爬虫很简单，写一个可持续稳定运行的爬虫也不难，但如何构建一个通用化的垂直爬虫平台？这篇文章，我就来和你分享一... 阅读全文 0 评论
爬虫常用user agent list 2026年03月30日 daichangya 17 爬虫常用 User Agent 列表在进行网络爬虫开发时，设置合理的请求头（Headers）是基础且必要的一步。其中，User-Agent（用户代理）字段用于标识客户端的身份，服务器常据此判断请求来源。为了避免被目标网站识别为自动化脚本，通常需要在请求中... 阅读全文 0 评论