基于JavaWebMagic框架的电商比价平台文献综述

 2021-11-05 07:11

毕业论文课题相关文献综述

文 献 综 述 1.前言 当下是一个大数据的时代,我们每个人都参与其中。

在大数据时代,将数据有效的检索并组织呈现出来有着很重要的意义。

在实际生活中我们经常会使用像百度、Google这些搜索引擎检索各种信息,但是这些通用性搜索引擎也存在着一定的局限性。

不同领域、不同背景的用户往往具有不同的检索目的和需求,搜索引擎所返回的结果包含大量用户不关心的网页。

现有一个游戏代理商需要设计开发一个实现游戏币充值、抽奖、积分的平台。

游戏代理商面临无法直接从厂商获取数据的问题。

而在该平台所需的信息检索的过程中搜索引擎,有着一定的局限性,如参差不齐的内容、无关紧要的数据、充斥着整个互联网铺天盖地的广告等等。

为了解决以上问题,目前本技术可以选择无极分类、网络爬虫等技术。

为了找到游戏代理商所需的、精确的数据,本次毕业设计选择网络爬虫技术。

网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者)是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。

剩余内容已隐藏,您需要先支付 10元 才能查看该篇文章全部内容!立即支付

免费ai写开题、写任务书: 免费Ai开题 | 免费Ai任务书 | 降AI率 | 降重复率 | 论文一键排版