(
课件网) 粤教版普通高中教科书 信息技术 必修1 5.2 数据的采集 信息技术 王凤龙 数据处理的过程 得到上述的数据处理结果需要经过哪些过程呢？ 2025中央一号文件词云图 近5年国内生产总值(GDP)变化图 数据来源：国家统计局 数据来源：中国政府网 数据处理的过程（以问卷星为例） 练习成绩阶段统计图 答案来源分布图 数据来自全国各地答题用户 数据处理的过程（以问卷星为例） 1、采集数据 2、存储数据 利用问卷星制作练习题目，然后通过网络分发问卷 答题者提交问卷后，存储到问卷星的后台服务器上 3、分析数据 4、可视化数据 后台通过程序分析得出各分数段人数、平均分等数据 将分析后的数据转换为生动、易于理解的可视化图表 数据处理的过程（以问卷星为例） 数据处理的过程 数据分析 数据可视化 数据存储 数据采集 系统日志采集法 网络数据采集法 …… 本地存储 云端存储 …… 对比分析法 结构分析法 …… 折线图 词云图 …… 01 02 03 04 数据保护 灵璧县第二中学 王凤龙 1、数据的采集 根据需求采用适当的方法和工具获取所需要的数据 P104 1、系统日志采集法 在信息系统中，系统日志是记录系统中硬件、软件和系统问题的信息文件。系统日志包括操作系统日志、应用程序日志和安全日志。 操作系统日志 记录操作系统的相关数据，如系统运行状态，硬件和设备信息、CPU、内存、磁盘和网络的使用率等。 应用程序日志 记录应用程序的相关数据，如用户登录和登出，用户权限变更、数据增加、删除、修改、查询等。 安全日志 记录系统或应用程序的相关安全数据，如系统报错、告警、非法登录、恶意攻击等安全事件数据。 通过日志服务器可以监视系统中发生的事件，可以检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。 1、系统日志采集法 通过日志服务器可以监视系统中发生的事件，可以检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。 2、网络数据采集法 网络数据采集是指通过网络爬虫或网站公开API等方式从网站上获取数据信息。网络爬虫是通过编写程序从互联网上自动提取信息的过程。 网页数据 本地数据文件 爬虫程序 1、发送 HTTP 请求 2、解析 HTML 内容 3、提取数据 4、存储数据 2、网络数据采集法 Python 丰富的生态使其成为开发爬虫的热门语言，其拥有众多强大的库支持。如 发送HTTP 请求的requests库、解析 HTML的BeautifulSoup库、处理Excel的openpyxl库。 https://book.douban.com/tag/名著 python爬虫程序 爬虫有风险，操作需谨慎 2、网络数据采集法 Python 丰富的生态使其成为开发爬虫的热门语言，其拥有众多强大的库支持。如 发送HTTP 请求的requests库、解析 HTML的BeautifulSoup库、处理Excel的openpyxl库。 https://book.douban.com/tag/名著 爬取完成的本地数据文件（Excel+图片） 3、其他数据采集法 API接口 传感器 摄像头 实地调查 网络问卷 实地调查 …… 灵璧县第二中学 王凤龙 2、数据的存储和保护 如今，无论是政府部门、企业还是个人，对数据的依赖性已越来越强 P104 数据的存储 本地存储 云存储 是指将数据存储在用户本地的设备上，用户可以直接控制和管理这些存储设备。 是指将数据存储在远程的数据中心，用户通过网络进行访问和管理。 优点 容量有限、成本高、访问不便 安全性高 、访问速度快 缺点 优点 数据安全性问题、 依赖网络环境 方便快捷 、扩展性强、成本较低 、易于访问 缺点 硬盘 U盘 光盘 SD卡 百度网盘 阿里云盘 腾讯微云 WPS云文档 数据的保护 案例一：2023年8月17日，南昌公安网安部门发现南昌某高校3万余条师生个人信息数据在境外互联网上被公开售卖。经查，涉案高校未建立全流程数据安全管理制度，未采取技术 ... ...
