信息技术必修1 数据与计算5.2.1 数据采集的方法和工具完美版ppt课件

这是一份信息技术必修1 数据与计算5.2.1 数据采集的方法和工具完美版ppt课件，文件包含新教材粤教版2019信息技术必修一52《数据的采集》课件pptx、爬虫程序采集网络数据mp4、第三方库模块安装与使用mp4、系统日志采集法mp4等4份课件配套教学资源，其中PPT共24页， 欢迎下载使用。
5.2.1 数据采集的方法和工具
在大数据时代，数据的来源广泛、类型丰富、规模巨大，人工采集数据显然不切实际，因而需要根据特定的需求，采用适当的方法和工具进行采集。
在信息系统中，系统日志是记录系统中硬件、软件和系统问题的信息文件。通常是在目标主机上安装一个小程序，将目标主机的文本、应用程序、数据库等日志信息有选择地定向推送到日志服务器进行存储、监控和管理。通过日志服务器可以监视系统中发生的事件，可以检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。
通过网络爬虫或网站公开的API（应用程序接口）等方式从网站上获取数据信息。该方法可将非结构化数据从网页中抽取出来，将其存储为统一的本地数据文件，并以结构化的方式存储。
阅读课本P105【扩展】
使用Pythn进行网络数据采集和分析所需要的一些第三方扩展库：NumPy，SciPy，Pandas，Matpltlib在Pythn中使用imprt语句导入指定模块的语法：
imprt mdule关键字 模块名
frm mdule imprt name 关键字 模块名 关键字 方法名
课本P106 运用Pythn第三方库绘制正弦函数图像
对于企业生产经营或科学研究等保密性要求较高的数据，可通过与企业或研究机构合作，使用特定系统接口等相关方式收集数据。例如，科学研究的数据是通过科学实验的各种传感器采集，并传输到数据库管理系统中的。
5.2.2 数据的存储和保护
云存储已经成为存储发展的一种趋势。它是把各类数据存储在虚拟的逻辑模型里，其物理空间存储在跨越多个地域放置的众多服务器中。云存储供应商拥有并管理这些服务器，负责管理数据的使用和访问权限，以及云存储环境的日常运营和维护。用户只需获取存储空间，把自己的数据存储进去。
数据的存储采用分布式文件存储或数据库存储。分布式文件存储的特点之一是为了解决复杂问题而将大任务分解为多项小任务，通过让多个处理器或多个计算机节点并行计算来提高解决问题的效率。
如今，无论是政府部门、企业还是个人，对数据的依赖性已越来越强。然而，数据安全的隐患无处不在，一旦数据泄密或丢失，造成的损失和影响将是巨大的。因此，在信息化社会，对数据的保护刻不容缓。
我们可以采用安装杀毒软件和防火墙来防备数据安全隐患。而更为彻底、有效的方法是采用拷贝、备份、复制、镜像、持续备份等技术进行数据保护。
为了防止他人对机密的数据、数据库进行非法访问、删除、修改、拷贝等操作，还可以采用对数据进行加密等方法，保护数据在存储和传递过程中不被修改或泄露。加密技术通常分为对称式加密和非对称式加密两类。
① 数据收集时进行数据精度处理
② 数据共享时进行访问控制
③ 数据发布时进行人工加扰
④ 数据分析时进行数据匿名处理等
对数据使用者进行道德和法律上的约束