导图社区 python大数据挖掘目录
这是一篇关于python大数据挖掘目录的思维导图,介绍了python基础、金融数据挖掘、数据库详解、云服务器部署实战等。
提示: 本内容由社区用户上传并分享。平台不对内容的真实性、合法性、知识产权归属及是否侵害第三方权利进行事前审核或保证。本内容可能包含受版权保护的图片、字体或其他第三方素材,使用前请自行确认授权范围。
社区模板帮助中心,点此进入>>
互联网9大思维
组织架构-单商户商城webAPP 思维导图。
域控上线
python思维导图
css
CSS
计算机操作系统思维导图
计算机组成原理
IMX6UL(A7)
考试学情分析系统
Python大数据挖掘与分析
第一章:python基础
Python、PyCharm的安装与使用
安装
使用
Python基础知识
变量、行、缩进、与注释
数据类型
数字与字符串
列表与字典、元组与集合
运算符
Python语句
if条件语句
for循环语句
while循环语句
try/except异常处理语句
函数与库
函数的定义与调用
函数的返回值与作用域
常用基本函数介绍
库
第二章:金融数据挖掘之爬虫基础
爬虫技术基础
网页结构基础
查看网页源代码
F12键
右键菜单
网址构成及http与https协议
网页结构初步了解
网页结构进阶
HTML基础知识
基础结构
标题、段落、链接
区块
类与id
初步实战
获取网页源代码
分析源代码信息
正则表达式
findall()函数
非贪婪匹配之(.*?)
非贪婪匹配之.*?
自动考虑换行的修饰符re.S
知识点补充
第三章:金融数据挖掘案例实战1
提取百度新闻标题、网址、日期及来源
编写正则表达式提取新闻信息
数据清洗并打印输出
批量获取多家公司的百度新闻井生成数据报告
批量爬取多家公司的百度新闻
自动生成舆情数据报告文本文件
异常处理及24小时实时数据挖掘实战
异常处理实战
24小时实时爬取实战
按时间顺序爬取及批量爬取多页内容
按时间顺序爬取百度新闻
一次性批量爬取多页内容
搜狗新闻与新浪财经数据挖掘实战
搜狗新闻数据挖掘实战
新浪财经数据挖掘实战
第四章:数据库详解及实战
MySQL数据库简介及安装
MySQL数据库基础
MySQL数据库管理平台phpMyAdmin介绍
创建数据库及数据表
数据表基本操作
Python与MySQL数据库的交互
安装PyMySQL库
用Python连接数据库
用Python存储数据到数据库
用Python在数据库中查找并提取数据
用Python从数据库中删除数据
案例实战:把金融数据存入数据库
第五章:数据清洗优化及数据评分系统搭建
深度分析——数据去重及清洗优化
数据去重
常见的数据清洗手段及日期格式统一
文本内容深度过滤——剔除噪声数据
数据乱码的处理
编码分析
重新编码及解码
解决乱码问题的经验方法
舆情数据评分系统搭建
根据标题评分
根据正文内容评分
解决乱码问题
处理非相关信息
完整的百度新闻数据挖掘系统搭建
将舆情数据评分存入数据库
百度新闻数据挖掘系统代码整合
从数据库汇总每日评分
第六章:数据分析利器:Numpy与pandas库
NumPy库基础
NumPy库与数组
创建数组的几种方式
pandas库基础
二维数据表格DataFrame的创建与索引的修改
Excel工作簿等文件的读取和写入
数据的读取与编辑
数据表的拼接
利用pandas库导出舆情数据评分
汇总舆情数据评分
导出舆情数据评分表格
第七章:数据可视化与相关性分析
用Tushare库调取股价数据
Tushare库的基本用法
匹配舆情数据评分与股价数据
舆情数据评分与股价数据的可视化
数据可视化基础
数据可视化实战
舆情数据评分与股价数据相关性分析
皮尔逊相关系数
相关性分析实战
第八章:金融数据挖掘之爬虫技术进阶
IP代理简介
IP代理的工作原理
IP代理的使用方法
Selenium库详解
网络数据挖掘的难点
模拟浏览器ChromeDriver的下载与安装
Selenium库的安装
Selenium库的使用
第十六章:机器学习之客户违约预测模型搭建
机器学习在金融领域的应用
决策树模型的基本原理
决策树模型简介
决策树模型的建树依据
案例实战:客户违约预测模型搭建
模型搭建
模型预测及评估
模型可视化呈现
第十五章:云服务器部署实战
云服务器的购买与配置
程序的云端部署
安装运行程序所需的软件
实现程序24小时不间断运行
第十四章:基于股票信息及其衍生变量的数据分析
策略基本思路
获取股票基本信息及衍生变量数据
获取股票基本信息数据
获取股票衍生变量数据
数据可视化呈现
数据表优化及代码汇总
用xlwings库生成Excel工作簿
xlwings库的基本用法
案例实战:自动生成Excel工作簿报告
策略深化思路
第十三章:用Python生成Word文档
用Python创建Word文档的基础知识
初识python-docx库
python-docx库的基本操作
用Python创建Word文档的进阶知识
设置中文字体
在段落中新增文字
设置字体大小及颜色
设置段落格式
设置表格样式
设置图片样式
案例实战:自动生成数据分析报告Word文档
第十二章:基于评级报告的投资决策分析
获取券商研报网站的表格数据
表格数据的常规获取方法
用Selenium库爬取和讯研报网表格数据
pandas库的高阶用法
重复值和缺失值处理
用groupby()函数分组汇总数据
用pandas库进行批量处理
评估券商分析师预测准确度
读取分析师评级报告数据进行数据预处理
用Tushare库计算股票收益率
计算平均收益率并进行分析师预测准确度排名
策略延伸
涨停板的考虑
按分析师查看每只股票的收益率
计算多阶段股票收益率
第十一章:邮件提醒系统搭建
用Python自动发送邮件
通过腾讯QQ邮箱发送邮件
通过网易163邮箱发送邮件
发送HTML格式的邮件
发送邮件附件
案例实战:定时发送数据分析报告
用Python提取数据并发送数据分析报告邮件
用Python实现每天定时发送邮件
第十章:通过PDF文本解析上市公司理财公告
PDF文件批量下载实战
爬取多页内容
自动筛选所需内容
理财公告PDF文件的自动批量下载
PDF文本解析基础
用pdfplumber库提取文本内容
编写正则表达式提取数据
PDF文本解析实战一寻找合适的理财公告
遍历文件夹里所有的PDF文件
批量解析每一个PDF文件
将合格的PDF文件自动归档
第九章:金融数据挖掘案例实战2
新浪财经股票实时数据挖掘实战
数据提取
东方财富网数据挖掘实战
数据清洗及打印输出
函数定义及调用
裁判文书网数据挖掘实战
巨潮资讯网数据挖掘实战