URL批量筛选处理工具
从海量文本中高效提取、筛选和管理网址与域名
主要功能
- 批量处理：轻松处理指定文件夹内（可包含子文件夹）的所有 TXT 文件中的网址。
- 精准提取：根据您的需求，选择性提取根域名（如 `example.com`）、二级域名（如 `sub.example.com`）或保留完整的带 `http(s)://` 的原始网址。
- 后缀筛选：只保留您关心的特定顶级域名后缀（如 `.com`, `.org`, `.cn`），支持自定义多个后缀。
- 智能去重：一键去除重复的域名或网址，确保结果列表干净、唯一。
- 高效稳定：采用多线程技术处理，速度快，同时提供清晰的进度反馈和日志记录。
- 简单易用：直观的图形用户界面，无需专业知识，点几下鼠标即可完成复杂的筛选任务。
软件界面
应用场景
- 网络营销与SEO：从大量网址中快速提取主域名，用于竞争对手分析、外链建设或市场调研。
- 数据清洗与整理：处理爬虫抓取或其他来源的杂乱 URL 数据，提取规范化的域名列表。
- 网络安全分析：从日志、样本中提取域名，用于威胁情报分析、恶意域名识别或安全审计。
- 网站管理：从备份、日志中提取所有子域名或关联域名，方便管理网站资产。
- 学术研究：从文本数据集中高效提取和分类网址信息，用于各类研究项目。
使用指南
- 选择输入目录：点击界面上的"浏览"按钮（输入目录旁），选择包含您`.txt`格式网址列表的文件夹。
- 选择输出目录：点击界面上的"浏览"按钮（输出目录旁），选择一个文件夹用来保存处理后的结果文件。
- 配置筛选选项：
- - 若需处理子文件夹内的文件，请勾选"包含子目录"。
- - 根据需要勾选"保留根域名"、"保留二级域名"或"保留http(s)域名"。您可以同时勾选多个。
- - 如果只想保留特定后缀的域名（如 `.com`），请在"后缀筛选"框中输入，多个后缀用英文逗号 `,` 隔开（例如：`.com,.cn,.org`）。留空表示不过滤后缀。
- - 勾选"去除重复结果"可以自动删除重复的域名或网址。
- 开始处理：点击"开始处理"按钮。软件将开始运行，您可以在下方的日志区域看到实时的处理进度和信息。
- 查看结果：处理完成后，日志区会提示"处理全部完成"。请前往您指定的"输出目录"，会看到生成的 `.txt` 结果文件（如 `根域名结果.txt`, `二级域名结果.txt` 等）。
- 停止处理（可选）：在处理过程中，如果您想提前终止，可以点击"停止处理"按钮。