使用光圈抓取打开的Web浏览器数据的任何可能性

我使用Aperture了解抓取网站。 如果我在mozila网页浏览器中打开http://demo.crawljax.com/ 。 如何使用Aperture抓取打开的浏览器内容。

步骤：1。在你的mozila firefox上打开http://demo.crawljax.com/ 。 2.执行java程序来抓取打开的mozila firefox选项卡。

Answer 1

您似乎需要抓取JavaScript / Ajax页面。 你实际上需要像googlebot这样的爬虫。 看到这个 googlebot可以抓取javascript页面。 您可以使用其他一些驱动程序/爬虫来完成。

这里发现类似的问题。 你可以从这里尝试最好的答案

Answer 2

使用Aperture抓取打开的Webbrowser数据是不可能的。 Crawljax是测试工具，它将打开新的Web浏览器和测试数据..我使用Crawljax确保爬行动态网站数据。

参考url： http ： //demo.crawljax.com/