内部和外部反向链接

我想找到站点地图的每个网址的内部和外部反向链接.xml。

我可以在 seomoz 免费 API 的帮助下得到这个。但是在提取数据时需要花费太多时间，有时还会在两者之间挂起。

数据提取过程需要像一个站点地图一样快.xml可以有数千个URL，而我有很多这样的站点地图.xml。

是否有任何 api 或其他方法（例如制作爬虫）来查找反向链接？