在Node中使用核心模块http和第三方模块cheerio实现穷人版网页小爬虫，以“深圳市住房公积金管理中心-信息公开”网站为例。     目标网页如下：     目标网页数据的dom结构如下：     示例代码如下： {代码...}     终端输出如下：

由于方法一和方法二都用到了ES5的indexOf()方法，有些浏览器可能不兼容。还可采用方法三：先对目标数组重排序，排序后重复项相邻，然后遍历目标数组。当排序后目标数组的项不是新数组的最后一项时，说明不是重复项，推入新数组。