野生蜘蛛在 Chrome 使用 OffiDocs

商品描述

注意：使用的选项卡越多，将使用更多的计算机资源（CPU、内存），并且每个页面都会花费一点磁盘来保存内容（在 IndexedDb 中，可从扩展 -> 检查视图：后台页面访问）。

“蜘蛛”的工作方式是这样的：1）当前的url用作起点，并在新选项卡中再次加载。

2）该页面加载后，获取该页面上的所有链接。

3）获取页面上的所有链接，包括相对url。

4) 在所有使用的选项卡中并行打开提取的链接（默认为 3 个，在 eventPage 中设置）。

5) 重复2-4 所有源代码位于：https://github。

com/nobodxbodon/ChromeCrawlerWildSpider

附加信息：

- 玄武供养
- 平均评分：1 星（讨厌它）

野生蜘蛛网 extension 与 OffiDocs 集成 Chromium 在线