开源dtu

DevDocs 是专为程序员和开发者设计的开源技术文档爬取和处理工具，基于智能爬虫技术，快速爬取、整理技术文档，将理解文档的时间从数周缩短至几小时。DevDocs支持1-5层深度的网站结构爬取，自动发现链接和子URL，多线程...