美丽的爬行动物和刮痧爬行动物的区别?

我想做一个网站,显示亚马逊和e-bay产品价格的比较。
以下哪一项效果更好?为什么?我有点熟悉BeautifulSoup,但对Scrapy crawler不太熟悉

Scrapy是一个网络蜘蛛或网络刮板框架,您给Scrapy一个根URL开始爬网,然后您可以指定要爬网和获取的URL数量等限制。它是一个完整的网络爬网或爬网框架

BeautifulSoup是一个解析库,它还可以很好地从URL获取内容,并允许您解析其中的某些部分,而无需任何麻烦。它只获取您提供的URL的内容,然后停止。它不会爬行,除非您手动将其放入具有特定条件的无限循环中

简单地说,有了漂亮的汤,你可以做一些类似于刮痧的东西。
Beautiful Soup是一个,而Scrapy是一个完整的框架

来源

发表评论