我现在想从网上爬特定关键词的网页,目前还没有目标网站,想请问下solr这样的搜索引擎支持没有目标网站的爬取了,爬取的效率大概怎么样?
solr是个搜索引擎,它不会主动去爬取数据,它就像个数据库。你可以使用爬虫软件把数据爬下来,再用solr做搜索功能。
爬取数据使用nutch啊
3 回答2.9k 阅读✓ 已解决
1 回答5.4k 阅读
2 回答15.2k 阅读✓ 已解决
9 回答9.7k 阅读
3 回答3.8k 阅读
solr是个搜索引擎,它不会主动去爬取数据,它就像个数据库。你可以使用爬虫软件把数据爬下来,再用solr做搜索功能。