数据科学导论

数据科学导论个人看来数据科学是一门关于数据的科学其蕴含面十分广阔大数据仅仅是其中的一小部分在以前的时代由于数据量较小人们对数据的认知停留在统计学的理论及方法上可是...

数据科学导论

• 第一章绪论
  • 1.1 为什么要研究数据科学
  • 1.2 基本概念
  • 1.3 数据科学项目涉及的人员及其任务
  • 1.4 数据科学项目流程
    • 1.4.1 确定问题
    • 1.4.2 制定目标
    • 1.4.3 搜集数据
    • 1.4.4 探索性数据分析
    • 1.4.5 建立模型
    • 1.4.6 性能评价
    • 1.4.7 结果展示
    • 1.4.8 部署模型
  • 1.5 数据科学项目中的数据流
• 第2章 问题与目标
  • 2.1 用户层面的问题与目标
  • 2.2 数据科学层面的问题与目标
• 第3章数据获取
  • 3.1 前提假设与数据方案设计
    • 3.1.1前提假设
    • 3.1.2 数据方案设计
    • 3.1.3 数据获取的可行性分析
    • 3.1.4 确定数据构成
  • 3.2 总体和抽样
    • 3.2.1 总体和个体
    • 3.2.2 样本
    • 3.2.3 无偏抽样
    • 3.2.4抽样偏差
  • 3.3混杂因素和 A/B Testing
    • 3.3.1混杂因素和辛普森悖论
    • 3.3.2双盲实验和A/B Testing
• 第4章 Python 基础
  • 4.1Python的下载与安装
  • 4.2 常用工具包的下载与安装
  • 4.3 Jupyter Notebook
  • 4.4 Python的常用数据结构
    • 4.4.1 列表
    • 4.4.2元组
    • 4.4.3字典
    • 4.4.4集合
    • 4.4.5 numpy.ndarray
    • 4.4.6 Pandas.DataFrame
  • 4.5Python 基本语法
    • 4.5.1基本命令
    • 4.5.2 控制流和相关语法
  • 4.6 Python 数据导入
    • 4.6.1 本地数据导入
    • 4.6.2 在线数据导入
    • 4.6.3 数据的连续流加载
• 第6章 建模与性能评价
  • 6.1统计建模
  • 6.2回归模型
    • 6.2.1线性回归模型
    • 6.2.2线性回归模型性能评价
    • 6.2.3线性回归与线性相关
    • 6.2.4逻辑回归
    • 6.2.5训练集-测试集划分
    • 6.2.6应用非数值特征作为输入时的one-hot编码
  • 6.3朴素贝叶斯模型
    • 6.3.1贝叶斯定理
    • 6.3.2高斯模型
    • 6.3.3多项式模型
    • 6.3.4伯努利模型
  • 6.4分类模型的性能评价
    • 6.4.1混淆矩阵
    • 6.4.2指标权衡
    • 6.4.3应用举例
    • 6.4.4参数区分性能评价
  • 6.5决策树
    • 6.5.1 决策树工作原理
    • 6.5.2 分类任务决策树的建模过程
    • 6.5.3 分类决策树应用举例
  • 6.6 有监督学习模型与无监督学习模型
  • 6.7 K-means 模型
    • 6.7.1 两个基本概念
    • 6.7.2 K-means迭代算法
  • 6.8 偏差-方差权衡
    • 6.8.1 偏差-方差困境
    • 6.8.2 过拟合与欠拟合
    • 6.8.3 K-折交叉验证
  • 6.9 参数的网格搜索
  • 6.10 集成学习
    • 6.10.1 孔多塞陪审团定理
    • 6.10.2 决策树集成
• 第5章 探索性数据分析
  • 5.1 数据检查
    • 5.1.1 数据的意义及规模
    • 5.1.2 特征的数据类型及意义
    • 5.1.3 初步排除数据泄露
  • 5.2 数据预处理
    • 5.2.1缺失处理
    • 5.2.2 异常处理
    • 5.2.3冗余处理
  • 5.3描述性统计
    • 5.3.1位置性测度
    • 5.3.2离散性测度
    • 5.3.3 图形化描述统计