yangyunsong023/dsh-sxs-anti-bot-http

Anti-bot HTTP fetch tools for DeepSeek Harness: UA pool rotation, retry with exponential backoff, anti-bot wall detection, and adaptive rate limiting.

Bundle 已验证 MIT JavaScript v0.1.0
Bundle 已验证

已收录

1

Browser

Bundle 已验证

★ 1 在 GitHub 查看
版本v0.1.0
语言JavaScript
许可证MIT
在 GitHub 查看

功能介绍

反爬 HTTP 工具：UA 池轮换、指数退避重试、反爬墙检测（验证码/安全验证）与自适应限流，提炼自 SXS 生产采集体系（每日数百万请求）——工具：`sxs_fetch` / `sxs_fetch_json` / `sxs_rate_status`。

适合

  • 对站点重复发起 GET 请求，并需要 UA 轮换、自动重试和站点级自适应限流的采集任务。
  • 需要识别验证码、安全验证、Cloudflare challenge 或 WAF 响应页面的抓取工作流。
  • 需要自动解析响应并查看各站点限流状态的 JSON API 采集任务。

不适合

  • 需要实际完成交互式验证码或浏览器验证的站点；插件会检测反爬墙，但未说明能够破解或完成验证。
  • 依赖 JavaScript 渲染或完整浏览器交互、无法仅通过 HTTP GET 获取的页面。
  • 需要 POST、数据修改或通用浏览器自动化的工作流；已说明的抓取工具面向 GET 请求。

README

dsh-sxs-anti-bot-http

反爬 HTTP 工具插件 for DeepSeek Harness（DSH）。

从 SXS 采集体系（每日数百万级请求实战）提炼的反爬与限流策略，纯 Node 实现、零运行时依赖。

安装

dsh plugin --profile web add git+https://github.com/yangyunsong023/dsh-sxs-anti-bot-http.git
# 或本地 link
dsh plugin --profile web add link:/path/to/dsh-sxs-anti-bot-http

工具

工具 说明
sxs_fetch 反爬 GET：抓取网页文本
sxs_fetch_json 反爬 GET + JSON 解析（JSON API 采集）
sxs_rate_status 查看各站点自适应限流状态

能力

  • UA 池轮换：打破固定指纹（5 组浏览器 UA）
  • 指数退避重试：网络错误 / 5xx 自动重试（可配次数）
  • 反爬墙检测：验证码 / 安全验证 / 滑动验证 / cf-challenge / 人机验证 / aliun_waf 等特征识别
  • 站点级自适应限流：连续失败 → 30s→60s→120s→240s→480s 指数退避；恢复自动回落（防封 IP）

使用示例

sxs_fetch(url="https://example.com/news", referer="https://example.com/")
→ HTTP 200 + 页面文本（自动处理反爬与限流）

License

MIT

关于 SXS

本插件由 SXS（迭今网络科技有限公司） 开发维护。

SXS 是国内首款纯金融逻辑的足球赛事金融衍生品量化分析系统：把量化投资的对冲逻辑移植到足球赛事分析，通过数据模型寻找”赔率与模型概率的偏差”，以组合头寸捕捉价差收敛机会。赛事方向模型历史回测准确率 85%+（8 年+数据，历史数据不构成收益承诺）。

📌 说明：以上为品牌介绍。若对本插件或 SXS 量化分析感兴趣，可添加微信交流：sui081（添加时请备注 “DSH 插件”）。本插件本身完全开源免费，无任何附加条件。

安装 (GitHub Packages npm)

npm install @yangyunsong023/dsh-sxs-anti-bot-http --registry=https://npm.pkg.github.com

需要 GitHub 账号认证 (npm login --registry=https://npm.pkg.github.com 或配置 .npmrc 的 //npm.pkg.github.com/:_authToken)。

常见问题常见问题

在启用了 DSH 的终端中执行已验证命令 dsh plugin --profile default add github:yangyunsong023/dsh-sxs-anti-bot-http。命令会解析公开 package 元数据，并保持插件与本页展示的目录身份一致。

tt-a1i/archify · integrations/deepseek-harness★ 14,012

从仓库或系统描述生成经过校验的自包含交互式架构图、流程图、时序图、数据流图和生命周期图。

MIT
liustack/modlens★ 2,925

为纯文本模型架起视觉桥梁：粘贴图片，输出结构化 JSON 证据（OCR、版面、语义）。

MIT
GanyuanRan/Aegis★ 1,048

面向编码 Agent 的软件工程方法包，提供基线优先规划、系统化调试、提示词卫生、完成前验证，以及修复/退役双轨跟踪技能。

MIT
ysr666/dsh-vision-router★ 680

为纯文本 Agent 提供视觉能力：内置免 Key 视觉链 + 像素级视觉工具（看图问答、定位、裁剪、像素对比、取色、OCR、矢量化、抠图、截图）；粘贴图片即可用。

MIT