Elixir

当 Scrapy 显得力不从心且 Python 速度缓慢时：使用 Elixir 和 Crawly 收集数据

当 Scrapy 触及极限、Python 爬取缓慢时，运行在 BEAM VM 上的 Crawly 为大规模网页抓取提供了一个强大的替代方案，拥有熟悉的概念和内置的管理工具。