一个在某个网站上搜索的java程序

我想编写一个Java代码来搜索某个网站“新闻纸网站”。 网站中的每个结果都显示在指定的URL中。 我怎么开始? 有一个好的图书馆可供使用吗? 我可以从您在这个领域的经验中受益吗?

搜索“网络爬虫”,你会发现很多例子(例如Crawler4J或Crawler ),如何解决这个问题。

除了Java之外,当涉及到从网页上点击内容时,你经常会遇到Python – 我不是Python人,但它似乎适合这项任务。