Python在数据分析领域应用广泛吗？

本文共计2463个文字，预计阅读时间需要10分钟。

目录+引言+一、主线任务

1.数据处理

2.血缘追踪

3.SQL表血缘

二、实现过程

1.目标效果

2.代码实现

1. 功能函数识别 2. SQL标准格式 3. 解析AST树 4. 最终效果：引言+SQLparse开源库解析中就说过

目录

• 引言
• 一、主线任务
• 1.数据治理
• 2.血缘追踪
• 3.SQL表血缘
• 二、实现过程
• 1.目标效果
• 2.代码实现
• 1.功能函数识别
• 2.SQL标准格式
• 3.解析AST树
• 4.最终效果：

引言

SQLparse的开源库解析中就说过自己在寻找在python编程内可行的SQL血缘解析，JAVA去解析Hive的源码实践的话我还是打算放到后期来做，先把Python能够实现的先实现完。主要是HiveSQL的底层就是JAVA代码，怎么改写还是绕不开JAVA的。不过上篇系列我有提到过sqlparse，其实这个库用来解析血缘的话也不是不可以，但是能够实现的功能是有限的，目前我实验还行，一些较为复杂的SQL也能解析得出，算是成功达到可部署服务的水准了，但是根据SQL格式来匹配的话肯定是有些SQL格式不能完全匹配成功的，如果大家有需要血缘分析的SQL可以再次验证一下。