基本信息

---

下载

文档摘要

---

PAGE3

第一章前言

1.1引言

网络爬虫是一个可以自动捕获网页中各种数据的程序。网络爬虫查找web页面的内容通过web页面的链接地址，并返回给用户所需的数据，而无需对浏览器进行手动操作。爬虫在搜索引擎当中占有重要的作用，对于搜索引擎，在Internet上捕获数据。谷歌、百度等通用搜索引擎逐渐成为人们上网的入口点。但由于其普遍的局限性，网页捕获并没有针对性，无法对特定领域的爬取结果进行具体分析，导致查询结果不够专业和深入。此外，一般的搜索引擎通常会返回与用户正在寻找的主题无关的结果，从而导致信息过载。本文提出的爬虫程序通过仿真访问电子商务平台的网站，获取相关的商品数据，并将这些