银莲花 Anemone是一个网络蜘蛛框架，可以蜘蛛一个域并收集有关其访问页面的有用信息。 它用途广泛，可让您快速轻松地编写自己的特殊蜘蛛任务。 有关更多信息，请参见 。 功能 多线程设计实现高性能 跟踪301 HTTP重定向 内置BFS算法确定页面深度 允许排除基于正则表达式的URL 选择链接，在每个页面上使用focus_crawl（） HTTPS支持 记录每页的响应时间 CLI程序可以列出域中的所有页面，计算页面深度等 遵守robots.txt 使用TokyoCabinet，SQL