1-3 数据处理与应用

上海高一 信息技术教材 必修1 第3章，常用数据分析图：散点图、折线图、柱状图、饼图、箱线图（matplotlib工具包实现绘制）。

1-3 数据处理与应用

• 基于共享单 车项目规划
  • 共享单车工作原理分析
    • ● 用户使用过程分析 ● 车辆工作过程分析（采集哪些信息） ● 信息筛选
  • 学习规划、设计方案
  • 了解数据分析与处理的过程与意义
  • 完善拓展项目方案
    • ● 实例学习：小区智能停车场 ● 实例学习：学生体质健康项目
• 数据采集
  • 采集方式
    • ● 传感器数据采集
    • ● 互联网数据采集
      • 获取步骤
        • 获取网页、解析网页、保存数据
      • 具体方法
        • (1)requests库的功能 (2)BeautifulSoup库的属性和方法 (3)基于Python的网页爬虫的代码实现
      • 具体操作实例
        • 上海天气信息的获取
      • 网络信息采集的道德与法律
  • 采集过程
    • ● 明确数据要求 ● 确定数据来源 ● 选择采集方法 ● 实施数据采集
• 数据整理
  • 数据整理 （pandas库）
    • ● 去重处理：drop_duplicates()方法 ● 缺失值处理：isnull()方法、notnull()方法、dropna()方法 ● 异常值处理：箱线图、散点图、DateFrame()方法
  • 数据读取与存储 （pandas库）
    • ● read_csv()函数、to_csv()函数
• 数据存储与保护（pandas库）
  • 数据安全意识与防护
• 数据分析方法和工具 （Python）
  • 对比分析法、平均分析法、结构分析法
  • 电子表格、在线数据分析平台、数据分析语言
  • numpy数据分析实例
• 数据可视化工具 （matplotlib工具包）
  • 常用函数介绍：figure()、title()等
  • 常用数据分析图：散点图、折线图、柱状图、饼图、箱线图（matplotlib工具包实现绘制）
  • 分析特征关系、特征内部数据分布与分散状态
• 常用的数据分析图
  • 分析特征间的关系
    • 折线图 plot()
    • 散点图 scatter()
  • 分析特征内部数据分布状态
    • 柱状图 bar()
    • 饼图 pie()
  • 分析特征内部数据分散状态
    • 箱线图 boxplot()
• 撰写数据分析报告
  • 数据分析报告的种类
    • 专题分析报告
    • 综合分析报告
    • 日常数据通报
  • 数据分析报告的组成
    • 标题
    • 目录
    • 前言
    • 正文
    • 结论
  • 完成数据分析报告
    • 数据采集总结
    • 选择合适的可视化图标
    • 统计分析得出结论