ARL-Next

💡 什么是 ARL-Next？

ARL-Next 是经典开源资产侦察灯塔 (ARL) 的现代化涅槃重构版本。 针对原版长期停更导致的任务假死、内存泄露、安装报错、依赖过时等致命缺陷进行了彻底的底层重构，并深度融入 AI Agent (MCP) 原生调度能力，进化为高性能、全维度闭环的下一代安全监控平台。

🥊 为什么选择 ARL-Next？(痛点对比)

✨ 核心特性矩阵

• 🤖 AI 原生赋能：内置标准化 MCP 服务，直接接入 Claude / Cursor / Open-WebUI，实现用自然语言下发扫描与导出 13 维资产全景大盘。（👉 MCP 配置指南）
• 🚀 高并发极速引擎：耗时截图与 OSINT 全面剥离为独立微服务；核心落库升级为 bulk_write 批量入库，轻松吞吐数十万级资产。
• 🌐 全维度企业资产闭环：深度打通企业 ICP 备案与天眼查股权穿透，自动化构建从“集团公司 ➔ 控股子公司 ➔ 域名 ➔ IP ➔ 端口 ➔ Web/组件 ➔ 漏洞”的完整链条。
• 🛡️ 威胁情报与代码雷达：内置 GitHub CVE 与代码泄露监控引擎，毫秒级原子锁防重复告警，实时感知外部威胁。
• ⚡ 极简运维与自愈机制：提供开箱即用的 2 分钟极速部署包，内置容器健康巡检与自愈机制，支持 Web 后台平滑热更新与 Basic Auth 前置防御。
• 🇨🇳 国内网络深度优化：全线镜像预构建并托管于阿里云国内私库，彻底告别海外网络阻断与 Pip/Docker 依赖拉取失败。

📸 界面预览

• 全局仪表盘 (Dashboard)：实时监测系统资源水位、扫描任务生命周期、多维风险态势大盘与全景操作日志流。

🏗️ 架构设计

ARL-Next 采用前后端解耦、异步分布式任务队列与轻量微服务集群架构。整体数据流与模块交互如下：

graph TD
    %% 1. 接入层
    User["👨‍💻 安全分析师 (浏览器)"] -->|"HTTPS / Basic Auth (5173)"| Nginx["🖥️ Frontend (Nginx + Vue 3)"]
    Agent["🤖 AI Agent (Claude / Cursor)"] -.->|"MCP 协议 (Stdio)"| MCP["🤖 MCP Server (Python 原生)"]

    %% 2. API 网关层
    Nginx -->|"REST API 反代 (5000)"| Backend["⚙️ Backend API (Gunicorn / Python 3.13)"]
    MCP -->|"API Token 鉴权调用"| Backend

    %% 3. 调度与任务分流 (双轨解耦)
    Backend -->|"1. 异步直调 (16181)"| OSINT["🧩 OSINT 微服务 (天眼查/ICP 协程池)"]
    Backend -->|"2. 生产扫描任务"| MQ(("⚡ RabbitMQ 3 (轻重/GitHub 多队列)"))

    %% 4. Celery Worker 扫描计算集群
    subgraph WorkerCluster ["⚙️ Celery Worker 扫描与调度集群"]
        MQ -->|"轻量队列 arltask_light"| W_Light["⚡ 轻任务 Worker (DNS/端口/指纹)"]
        MQ -->|"重载队列 arltask_heavy"| W_Heavy["🔥 重任务 Worker (Nuclei/PoC/爬虫)"]
        MQ -->|"威胁队列 arlgithub"| W_Git["🛡️ 威胁情报 Worker (CVE/代码泄露)"]

        Scheduler["⏰ 监控调度引擎 (Scheduler & Beat)"] -.->|"周期触发"| MQ
        W_Heavy -->|"HTTP 截图渲染 (5005)"| Puppeteer["🧩 Puppeteer 微服务 (无头截图/滚动自愈)"]
    end

    %% 5. 数据统一落库 (从上往下自然汇聚，彻底杜绝线条交叉穿透)
    Backend <-->|"大盘查询 / 状态读写"| DB[("🗄️ MongoDB 7.0 (联合索引大宽表)")]
    OSINT -->|"异步结果直接入库"| DB
    W_Light -->|"safe_insert_asset_many 批量写入"| DB
    W_Heavy -->|"bulk_write 批量写入"| DB
    W_Git -->|"原子 upsert 写入"| DB

    Autoheal["🛡️ Autoheal 守护探针"] -.->|"docker.sock 探活与秒级自愈"| WorkerCluster

    classDef default fill:#fbfbfb,stroke:#e0e0e0,stroke-width:1px;
    classDef core fill:#eef2ff,stroke:#6366f1,stroke-width:2px;
    classDef ai fill:#f5f3ff,stroke:#8b5cf6,stroke-width:2px;
    classDef db fill:#ecfdf5,stroke:#10b981,stroke-width:2px;
    classDef micro fill:#fffbeb,stroke:#f59e0b,stroke-width:1px;

    class Nginx,Backend,WorkerCluster,W_Light,W_Heavy,W_Git core;
    class Agent,MCP ai;
    class DB,MQ db;
    class OSINT,Puppeteer,Autoheal,Scheduler micro;

核心架构要点：

1. 🖥️ 展示与网关 (Frontend / Nginx)：基于 Vue 3.5 + Nginx，支持全站表格/操作栏 Sticky 悬浮吸附与 Basic Auth 前置网关防御。
2. ⚙️ 业务与 AI 赋能 (Backend / MCP)：基于 Python 3.13 + Gunicorn；内置 原生 Python MCP 赋能 AI Agent 调度与 13 维全景大盘导出。
3. 🧩 OSINT 独立微服务：专职天眼查与 ICP 异步情报收集，由 Backend 直调协程池，彻底脱离 Celery 队列杜绝假死。
4. ⚡ 多队列 Worker 集群：拆分轻量/重载/威胁情报独立队列；重任务严格限制子进程生命周期彻底根除内存泄露。
5. 🛡️ 微服务与自愈守护 (Puppeteer / Autoheal)：独立容器专职无头截图并支持滚动自愈；Autoheal 实时探针秒级恢复容器死锁。
6. 🗄️ 高吞吐持久层 (MongoDB 7.0)：全线升级 bulk_write 批量落库，核心表覆盖联合唯一索引并设 1GB 内存池保护。

🚀 部署指南

生产部署 (单 VPS 一键秒级上线) ⭐ 推荐

适用环境：公网云服务器 (Ubuntu / Debian / CentOS / 统信等)、企业内网服务器。
预估耗时：自带 Docker 环境仅需 1~2 分钟；全新裸机从零安装约 3~5 分钟。

核心优势： * ⚡ 国内极限满速：直连阿里云北京 ACR 镜像私库，彻底告别海外网络阻断。 * 📦 开箱即用极简：免复杂环境配置、免 docker login，剔除冗余编译链。 * 🛡️ 双层安全防护：内置 SSL 证书与 Basic Auth 前置网关防御，核心组件全私有网络隔离。 * 🔄 Web 平滑热更：支持直接在管理后台一键无感热升级，免去繁琐的 SSH 终端操作。 * 🩺 全自动健康探活：内置 API 就绪轮询机制与 Swap 内存自愈，服务就绪再放行，告别 502 报错。

🚀 部署方式选择

方法一：国内极速一键部署（⭐ 推荐 · 绕过 GitHub 阻断）

在服务器终端 (需 root 权限) 粘贴并执行以下连缀指令。脚本将自动安装 Docker、自愈配置 Swap、从阿里云提取最新配置并一键拉起：

# 1. 安装基础工具并创建目录
apt-get update && apt-get install -y docker.io docker-compose-v2 openssl curl && \
mkdir -p ~/ARL-Next && cd ~/ARL-Next && \
# 2. 从阿里云国内镜像中提取全套部署编排
docker pull crpi-laul1izptqrf0tkf.cn-beijing.personal.cr.aliyuncs.com/owl234-arl-prod/arl-web:latest && \
docker rm -f arl-temp 2>/dev/null || true && \
docker create --name arl-temp crpi-laul1izptqrf0tkf.cn-beijing.personal.cr.aliyuncs.com/owl234-arl-prod/arl-web:latest && \
docker cp arl-temp:/code/start-prod.sh ./ && \
docker cp arl-temp:/code/docker-compose.prod.yml ./ && \
docker cp arl-temp:/code/updater ./ && \
docker cp arl-temp:/code/version.txt ./ && \
docker cp arl-temp:/code/frontend ./ && \
docker rm arl-temp && \
# 3. 赋予权限并启动
chmod +x start-prod.sh && \
bash start-prod.sh

方法二：GitHub 源码克隆部署（适用于海外服务器 / 需二次开发）

[!TIP] start-prod.sh 内置全套环境探针，裸机运行亦会自动安装 Docker 并优化内核配置。

git clone --depth 1 https://github.com/owl234/ARL-Next.git && cd ARL-Next
chmod +x start-prod.sh
bash start-prod.sh

🔑 访问与初始凭据

部署完成后，在浏览器中访问：https://<你的服务器IP>:5173（首次自签名证书请无视浏览器不安全提示）。

[!TIP] 商业证书替换 (可选)：将您申请的真实 SSL 证书重命名为 arl.crt 和 arl.key 放至 ssl-certs/ 目录，然后再次执行 bash start-prod.sh 即可。

💻 开发环境部署 (前端本地 + Docker 后端)

• 👥 适用场景：二次开发、PoC 插件编写与深度调试。
• ⚡ 核心优势：前后端彻底解耦，双端热重载 (Hot Reload) 实时生效，无需重复打包。
• ⚙️ 前置依赖：本地已安装 Docker 与 Node.js 18+ (脚本会自动检测并配置 pnpm 环境)。

🚀 一键拉起开发环境

git clone https://github.com/owl234/ARL-Next.git && cd ARL-Next
# 自动在后台启动后端容器组 (API / Worker / MongoDB / RabbitMQ)，并在前台启动 Vite 前端服务
bash start-dev.sh

启动完成后，访问 http://localhost:5173 即可实时预览开发界面（默认凭据：admin / arlpass）。

🗄️ 开发者调试端口与数据库直连 (开发环境专用)

[!NOTE] 生产环境为保障安全性已默认切断所有底层中间件外网端口。开发环境下可通过以下地址直连调试：

❓ 常见问题与运维排错 (FAQ)

sudo systemctl restart arl-updater.service

# 查看所有容器运行状态与健康探针
docker compose -f docker-compose.prod.yml ps

# 实时查看扫描 Worker 执行日志
docker compose -f docker-compose.prod.yml logs -f arl-worker

# 平滑停止或重启全部服务
docker compose -f docker-compose.prod.yml restart

📜 版本更新历史

🤝 致谢

本项目站在巨人的肩膀上，特此鸣谢以下项目与团队：

• 核心架构：基于经典开源项目 ARL 资产侦察灯塔 深度重构，并参考了 Aabyss-Team/ARL 与 adysec/ARL 等优秀实践。
• 指纹数据：特别鸣谢 威零安全团队 ( 公众号) 提供的万级高质量 Web 指纹库支撑。
• 功能灵感：OSINT 企业查询深度借鉴了 ICP_Query，威胁监控模块汲取了 github-cve-monitor 的优雅设计。

ARL-Next 将始终秉持开源互助的黑客初心，持续为网络安全攻防与企业防御建设贡献力量！

💖 赞助与支持

ARL-Next 的持续高频迭代离不开社区伙伴的慷慨支持。特别致谢以下赞助者：

⚠️ 法律与免责声明

[!CAUTION] 合规红线与免责条款：
本平台仅供经过合法授权的企业安全建设、SRC 漏洞挖掘、学术攻防演练及安全研究使用。使用本工具开展任何探测与扫描前，使用者必须确保已获得目标资产所有者的明确书面授权，并严格遵守《中华人民共和国网络安全法》及当地法律法规。
严禁利用本工具从事任何未授权的入侵、攻击或破坏行为！ 任何因违规滥用导致的网络安全事故或法律责任，均由使用者本人独立承担，本项目作者与贡献者不承担任何直接或连带责任。

💬 交流群与反馈通道

• 🐛 Bug 提交与功能建议：欢迎通过 GitHub Issues 提交反馈，通常 24 小时内跟进。
• 💡 技术交流与群聊：欢迎扫码添加作者微信或加入 QQ 交流群，探讨资产测绘、红蓝对抗与 AI 自动化安全。
• 📢 版本发版动态：关注微信公众号【owl安全】，第一时间接收最新发版、镜像更新与安全干货推送！

👤 个人微信	📢 微信公众号 (owl安全)	🐧 QQ 技术交流群

🌟 Star 走势与支持

⭐ 如果 ARL-Next 解决了你长期被扫描假死困扰的痛点，请随手点亮右上角的 Star 支持一下！