基于多线程网络爬虫技术的气象雷达数据采集系统任务书

 2021-11-10 22:10:51

1. 毕业设计(论文)主要目标:

利用多线程和网络爬虫技术,实现实时地从中国气象局气象探测中心网站上下载天气雷达的信息,实现全国雷达拼图,区域雷达拼图,雷达单站图的本地化。

2. 毕业设计(论文)主要内容:

随着互联网的蓬勃发展,网络上的信息呈现爆炸式增长。由于互联网上的数据过于庞大,数据增长而且更新十分迅速,所以用户难以快速准确地获得真正需要的信息。此外传统搜索引擎提供的特定领域的信息(比如气象雷达类数据信息)检索结果不够专业无法满足特定专业人群的特定需求。

为了解决传统搜索引擎的局限性,本文设计了一种基于多线程网络爬虫技术的气象雷达数据采集系统。“网络爬虫”是一个比较形象的名字,它是在互联网内,通过网页链接,从当前网页爬到下一个网页来进行网页内容搜集的工具。它所需完成的是:在一个网页上,获取网页的标题和网页中的摘要;将搜集到的网页标题,链接,网页的摘要放入数据库中;根据当前网页的内容,搜集网页中的链接信息,并根据链接顺序搜索相应链接网页的内容。

3. 主要参考文献

[1]李勇,韩亮.主题搜素引擎中网络爬虫的搜素策略研究[J].计算机工程与科学,2008,(10):33-41.

[2]汪涛.樊孝忠.主题爬虫的设计与实现[J].计算机应用,2004,(S1):110-121.

[3]郭辉.多线程的效率[J].计算机应用.2008,28(S2):141-143.

剩余内容已隐藏,您需要先支付 10元 才能查看该篇文章全部内容!立即支付

发小红书推广免费获取该资料资格。点击链接进入获取推广文案即可: Ai一键组稿 | 降AI率 | 降重复率 | 论文一键排版