NodeMaven 更新:为新一代网络运营者构建基础设施

在过去几个月里,我们发布了 爬虫浏览器,改进了会话控制,重构了部分 ISP 代理体验,新增了一套 免费诊断工具,并在幕后完成了一长串改进。
我本可以直接给您一份更新日志,但更愿意说明每项更新背后的缘由。
这些工作大多源于用户在实际使用中遇到的问题。尽管市场上已有众多浏览器自动化产品,用户仍在寻找一套足够灵活、能适配不同工作流的方案。我们持续优化代理会话的稳定性,尤其是针对较长的工作流。我们还注意到,用户需要一种更快捷的方式来了解请求为何失败、是否被封锁,或者真实 IP 是否已暴露。这促使我们着手打造一套免费的诊断工具。NodeMaven 一直在快速增长,因此我们也投入了大量时间在后端工作上。我们扩充了容量并加固了基础设施,以支撑这一增长并提升系统韧性。
以下是我们过去几个月的主要更新。
浏览器的发布无疑是最大的亮点
AI 智能体正变得越来越擅长 规划任务并编写相应代码,但它们仍然需要一个运行这些代码的地方。
开放的互联网是一个艰难的工作环境。页面通过 JavaScript 渲染内容,按钮在网络请求完成后才出现,会话依赖于 Cookie,而地理位置也会改变智能体所看到的页面。
最近,我分享了一项 研究 on X 和 LinkedIn。该系统基于截图而非读取页面代码来工作,在覆盖 16 类 CAPTCHA 的测试中达到了 85.4% 的准确率。
网站运营者也有充分的理由密切审视自动化流量。Imperva 的 《2026 年恶意机器人报告》,基于 2025 年全年的活动数据,发现自动化流量占到了 全部网络流量的 53% 以上,高于 2024 年的 51%。Akamai 测得 平均每天 25 亿次 AI 机器人请求 在其整个网络中的情况,并报告称 AI 相关流量在 2025 年下半年几乎翻了一番。
这些正是我们开发 NodeMaven 抓取浏览器的部分原因。它为智能体或开发者提供一个云端浏览器,具备完整的 JavaScript 渲染、NodeMaven 住宅代理和移动代理流量、相互匹配的浏览器与位置设置、持久化配置文件、CAPTCHA 处理支持,以及用于查看和调试运行过程的工具。关于我们为何将浏览器层与代理层整合在一起,我在 这篇 LinkedIn 帖子中分享了更多内容.
您可以编写 AI 提示词、从模板开始,或通过 CDP 连接 Playwright 和 Puppeteer。 实时浏览器 会显示页面上正在发生的情况。截图、录屏、控制台输出以及 结构化 JSON 都能在结果看起来不对时提供帮助。
对于使用 AI 智能体的用户,我们最近新增了一个 复制设置提示词 按钮,供您的智能体使用。它会从控制面板复制 Scraping Browser 的设置上下文,您可以直接将其连同任务和所需输出一起粘贴给智能体。例如,智能体可以浏览一个大量使用 JavaScript 的产品目录,在整个运行过程中保持所选位置和会话状态,并以 JSON 形式返回所需字段。如果有内容缺失,录屏和浏览器输出可作为开始调试的切入点。
Scraping Browser 面向拥有有效住宅代理订阅的客户开放。我们 不收取单独的浏览器运行费用 ,符合条件的用户均适用。会话使用的是套餐内的代理流量。
改进粘性会话
我们还对超级粘性会话(Super Sticky Sessions)进行了改进。当客户选择 尽可能长时间保持 IP时,分配的 IP 现在会保持更长时间。这对需要登录和多步骤操作的浏览器流程很有帮助,因为中途更换 IP 可能意味着一切要从头再来。控制面板中的设置方式保持不变。
如果某个工作流需要长时间使用同一个 IP,我通常会推荐我们的 ISP 代理。不过,仍有一些客户使用 轮换住宅代理 ,并且需要 IP 在会话期间保持不变。我们新增了一个 no-rotate 选项。如果分配的 IP 暂时不可用,NodeMaven 会等待该 IP 恢复,而不是将会话切换到另一个 IP。这样可以避免在已登录的多步骤流程中再次触发验证或被迫完全重来。
我们让 ISP 代理更易于管理
我们对 ISP 代理包的交付和管理方式做了多项改动。
在交付之前,新的 ISP 代理包都会经过我们的 内部质量检查。客户还可以在控制面板中使用 整包更换按钮 ,对新发放的代理包可使用一次,无需联系客服。
我们重新构建了 控制面板中的 ISP 板块 ,新增了订单备注、搜索功能、更清晰的 IP 详情以及 直接代理检测。我们还让 订阅与自动续费 更易于管理。
我们还注意到,错过手动续费可能会中断正在这些 IP 上运行的工作流。因此我们新增了 续费提醒 以及一个 24 小时延期 ,在到期后为客户提供更多续费时间。
注意: 我们的团队已经介绍了 质量检查、续费控制以及 ISP 控制面板的改动 在另一篇文章中有更详细的介绍。
基础设施改进
本周期我们的大部分工作都集中在产品背后的基础设施上。
我们扩充了服务器集群,以增加 更多容量与冗余,并重新设计了 负载均衡 ,使流量分配更加均匀。这为网络在需求高峰期提供了更多余量,并减少了瓶颈。
我们还持续加强 网络层安全 ,并引入了 速率限制 ,以在流量增长时保护服务质量并确保共享资源的公平使用。
团队修复了一个 资源泄漏 问题,它位于核心后端服务中,在长时间运行期间可能逐渐影响性能。解决该问题后,性能下降和意外重启明显减少,使服务能够长期保持稳定一致。
我们还优化了代理层与 缓存及会话基础设施之间的通信。这减少了不必要的后端工作,有助于实现更快的响应时间和更高的吞吐量。
这是过去几个月里我最喜欢的团队工作成果之一。控制面板中没有新增任何设置,但这些改进让我们在流量高峰期拥有更多容量,并带来 负载下更稳定一致的性能.
注意: 我们的团队已在以下内容中对该主题做了更多说明: 基础设施改进更新 一文。
免费的代理和浏览器诊断工具
我最近在 X 上提出了一个问题:当您的爬虫被拦截时,您会先归咎于谁,代理还是浏览器?
我的第一项检查是 直接连接。如果同一请求在不使用代理的情况下也失败,那么更换代理很可能无法解决问题。在此基础上,我会再检查浏览器、运行脚本的机器、DNS 路径以及目标网站本身。
我们发布了 六款免费的浏览器端工具 ,让这些初步检查更加快捷:
- 代理检测工具 检查代理是否有响应,测量连接和传输性能,并将实际接收的字节数与代理服务商统计的流量进行对比。这可以揭示上报用量高于实际传输数据量的情况。
- WebRTC 泄漏测试 检查浏览器是否通过 WebRTC 暴露了另一个网络地址。
- DNS 泄漏测试 显示由哪些解析器处理请求。
- IP 查询 返回某个 IP 的位置、ASN 和网络详情。
- Meta 标签抓取器 读取页面的标题、描述、Open Graph 及其他元数据。
- 连接检测器 对比浏览器上报的信息与服务器在 HTTP、WebRTC 和 HTTP/3 层面观察到的信息。它有助于发现真实 IP 泄漏、WebRTC 伪装以及标准 IP 检查可能遗漏的连接不一致问题。
在过去几个月里,我们还在 NodeMaven GitHub.
我们的 开源代理基准测试 会在浏览器引擎、代理路径、国家和主机的受控组合下运行相同的目标。它包含一个 直接连接 作为对照,每项结论都可追溯到存储在仓库中的运行数据。任何人都可以复现该分析,或使用自己的代理运行这套基准测试。无需 NodeMaven 账户。
我们还开源了完整的 连接检测器,包括其前端和后端。它采用 MIT 许可证并支持自托管,因此用户可以查看各项检查的工作原理,或在自己的基础设施上运行该工具。
更多更新
同一时期还发布了其他几项更新:
- 住宅代理控制面板 现在提供更清晰的定向选项,并在客户开始大规模运行前进行实时质量检查。
- API 列表端点 每次请求最多可返回 1,000 条记录,而非之前的 100 条。我们还新增了可用性筛选器,便于查找有剩余容量的地区。
- ISP 代理与住宅代理控制面板页面 已重新设计,订单、地区和状态更加一目了然。
- 在结账时选择俄罗斯的客户 可使用受支持的俄罗斯发行银行卡或 YooMoney 付款,具体取决于当前的支付可用性。
下一步:基础设施与产品体验
我预计我们接下来的大部分工作将集中在 强化基础设施 以应对 NodeMaven 的持续增长, 开发新产品 和 让现有产品更易于使用.
我们将持续投入于 容量与可靠性。在控制面板方面,我们希望设置、账户管理和故障排查都能 步骤更少 ,并且需要的支持消息也更少。
如果您已经在使用 NodeMaven,请在您熟悉的工作流程中试试 全新的会话控制, 更新后的 ISP 部分,或 免费诊断工具 ,选择一个您熟悉的工作流。
我会在 X 上的 @StanSadokov 和 LinkedIn.




