1、基于Python爬取莆田市2022年四月份天气信息获取与预处理学 院： 新工科产业学院 专 业： 数据科学与大数据技术专业 课 程： 大数据获取与预处理项目实践2022年 05月目录1 绪论31.1 概述31.2 课题背景31.3 小组分工32 采用技术与开发工具的简介42.1 Python 语言的产生和发展历史42.2 python语言的特色52.3 Python的缺点62.4 HTML的定义72.5 HTML的原理73 程序设计73.1 主题页面的结构特征分析73.2 数据爬取与采集93.3 对数据进行清洗和处理103.4 数据分析与可视化113.5 数据持久化144 总结14参考文献15
2、小组项目评分规则15一、评分（100分制）：15二、组内成员互评15基于Python爬取莆田市2022年四月份天气信息获取与预处理1 绪论1.1 概述“蒙蒙细雨蔽江村，江馆愁人好断魂。”这句诗是出自杜荀鹤的江夏，蒙蒙烟雨的场景，勾起了诗人内心的忧愁和伤感。小雨这一常见的天气与人们的日常生活息息相关，天气的好坏影响着人们的出行和心情。一般人们要出门前都要看一下天气预报，留意温度和天气，天冷加衣，下雨带伞，这些都是出行必备。但“天有不测风云，这句话充分说明了天气预报的难度。随着科学技术的发展，天气预报的准确率在不断提高，人们根据天气预报合理安排生产和生活，减少了气象灾害带来的损失。因此天气预报成为
3、现代社会必不可缺的重要信息之一。1.2 课题背景早起还没有天气预报这个软件的时候，人们通过动物的反应和风的走向、云朵的排布来判断天气的好坏。如： 蚂蚁搬家蛇过道，明日必有大雨到。天上鱼鳞云，地下雨淋淋。南风暖，北风寒，东风潮湿，西风。也有早期人们通过甲骨占卜吉凶，这其中就有包括风、雨、云等方面词语，这证实了早期我们的先祖就有可以预测天气的方法。到了清康熙十六年，我国才出现了连续的气象记录和专门从事气象工作的部门“钦天监”。他们统一制作了测雨器，并且令各省地区，逐日记录晴雨，观测雨、雪、风、雷等天气现象。这是中国历史上第一个地面气象观测网。今天的天气预报主要是使用收集各种大量的数据，如：气温、湿
4、度、风向和风速、气压等，然后使用对大气过程的认识（气象学）来确定未来空气变化。因为要对各类数据进行分析，预报人员会在数值预报的基础上对天气学进行充分利用，并结合动力气象学知识、天气实况、卫星云图等资料，对数值预报结果的合理性水平进行判断。若合理，则对数值预报结果进行使用，若存在不合理，则需进行订正预报，这种方法进一步增强了气象预报的准确性水平，并使最终的结果更加客观。由于大气过程的千变万化以及今天科学并没有最终透彻地了解大气的变化过程，因此天气预报总是有一定误差的。1.3 小组分工严慧芳：Python 语言的产生和发展历史、对数据进行清洗和处理尹艳：Python的缺点、数据分析与可视化的回归方
5、程曾佳茵：HTML的原理、数据分析与可视化的折线图的绘制张慧玉：python语言的特色、数据爬取与采集、数据持久化张淑祺：绪论、总结、数据分析与可视化的散点图的绘制张雪：HTML的定义、主题页面的结构特征分析2 采用技术与开发工具的简介2.1 Python 语言的产生和发展历史python的作者Guido van Rossum,在阿姆斯特丹开发了一种新的编程语言python，而Python作为该编程语言的名字，是因为Guido是Monty Python喜剧团的爱好者而命名的，具体在1991年诞生了第一个python编译器。Python语言是一种面向对象的程序设计语言。且目前被广泛使用的一门高级
6、语言，由于Python语言具有简洁性、易读性和可扩展性，使得用Python做科学计算的研究机构日益增多。根据2019年计算机语言排行榜，Python语言排名第三，仅次于C语言和Java,Python语言已成为目前最火的语言之一。目前，人工智能、云计算以及大数据研究持续火热。Python语言由于在网络爬虫、机器学习、人工智能、数据分析等领域表现不俗，并且相比其他语言来说更简单易学，因此其持续火热，学习者众多。1在2007年在对于关于python的未来发展方向的问题，作者Guido van Rossum在谈Python的现状与发展时表示python将坚持走新的编程语言路线，将更加简化编程语言。Py
7、thon语言经历了痛苦但令人期待的版本更迭过程，从2008年开始，用python编写的几万个函数库开始了版本升级过程，至今绝大部分python函数库和python程序员都采用python3.0系列语法和解释器。Python的发展历史：2.2 python语言的特色(1)代码简洁。一般情况下，要实现相同功能，Python代码相对于C、C+、Java代码更加简单明了。(2)语法优美。python的代码接近人类语言，属于高级语言，任何人都可编写，规范且具有统一风格，具有可读性。(3)简单易学。python摒弃了C语言中复杂的指针，并且秉持“使用最优方案解决问题”的原则，简化了语法，学习难度降低。结果图：3.4.2 散点图3.4.3 回归方程根据爬取到的数据和上面的散点图所得出的数据，绘制了回归方程，如下图所示：3.4 数据分析与可视化3.4.1 折线图
