
PostgreSQL数据分析实战:从数据清洗到可视化全流程
文章平均质量分 96
聚焦PostgreSQL数据分析全流程,通过真实项目案例解析数据清洗、复杂查询与可视化实战。涵盖敏感数据过滤、正则表达式清洗、SQL分析函数应用,结合Python等工具实现数据洞察可视化。从原始数据处理到业务决策支持,提供可落地技术方案与避坑指南,助力掌握其在商业智能与数据科学场景中核心能力。
言析数智
为公安、烟草、交警、教育教学等十多个领域提供深度数据洞察与解决方案,具有从0-1项目孵化成功经验。
自研工具:数据调研工具、AI定制算法推理工具等
技能认证:PMP认证、信息系统项目管理师、数据工程专家认证、CFA level I(passed)
工作荣誉:
2024年度-数据之星奖
2024年-数据应用模型创新大赛-单位一等奖、作品一等奖、个人一等奖
2024年-科技先进工作者、数据工程专家认证
2023年-信息系统项目管理师、PMP认证、省级评标专家库、参与4篇专利、杭E人才
2022年-攻坚克难奖
2021年-研发之星奖
2020年-优秀员工
2017年-校优秀应届毕业生
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
【字节跳动】数据挖掘面试题0020:给一个表只有id和时间,如何估算平均访问时长 【撕代码】
本文介绍了使用PostgreSQL计算平均访问时长的三种方法:1)相邻记录时间差法,通过LEAD函数计算连续访问时间差;2)基于会话超时的方法,设置30分钟超时阈值识别会话边界;3)明确标记进入/退出事件法。文章详细展示了测试数据准备(10个用户,每个50-100条随机访问记录)和SQL实现代码,重点解释了EPOCH转换的必要性以及会话识别的逻辑。每种方法都提供了用户级和全局级的平均时长计算,适用于不同粒度的分析需求。原创 2025-07-22 17:40:24 · 164 阅读 · 0 评论 -
【PostgreSQL】数据探查工具1.0研发可行性方案
【PostgreSQL】数据探查工具1.0研发可行性方案原创 2025-05-24 21:02:32 · 422 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.3 交互式仪表盘开发(Dash/Flask可视化应用)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.3 交互式仪表盘开发(Dash/Flask可视化应用)原创 2025-05-08 02:05:23 · 1378 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.2 违约预测模型构建
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.2 违约预测模型构建原创 2025-05-13 15:51:20 · 852 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.3 风险指标可视化监控
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.3 风险指标可视化监控原创 2025-05-13 23:12:29 · 1172 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.2 预测分析基础(线性回归/逻辑回归实现)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.2 预测分析基础(线性回归/逻辑回归实现)原创 2025-05-05 23:19:25 · 1289 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.4 可视化报告输出
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.4 可视化报告输出原创 2025-05-10 00:09:24 · 1370 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.2 高级可视化技巧(热力图/桑基图/地理地图)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.2 高级可视化技巧(热力图/桑基图/地理地图)原创 2025-05-08 00:45:14 · 1268 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.3 异常值识别(Z-score法/IQR法/业务规则法)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.3 异常值识别(Z-score法/IQR法/业务规则法)原创 2025-05-04 22:50:05 · 1283 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.2 流量转化漏斗分析
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.2 流量转化漏斗分析原创 2025-05-08 23:42:31 · 1020 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.4 数据重复与去重(IDENTITY COLUMN/UNIQUE约束)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.4 数据重复与去重(IDENTITY COLUMN/UNIQUE约束)原创 2025-05-04 23:02:27 · 1216 阅读 · 2 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】7.2 PostgreSQL与Python数据交互(psycopg2库使用)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】7.2 PostgreSQL与Python数据交互(psycopg2库使用)原创 2025-05-07 19:41:01 · 1168 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-C. 常用SQL脚本模板
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-C. 常用SQL脚本模板原创 2025-05-14 22:34:50 · 1662 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.1 描述性统计分析(均值/方差/分位数计算)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.1 描述性统计分析(均值/方差/分位数计算)原创 2025-05-05 21:01:57 · 1282 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.1 风险数据清洗与特征工程
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.1 风险数据清洗与特征工程原创 2025-05-12 20:41:36 · 1242 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】7.3 动态报表生成(Jupyter Notebook/ReportLab)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】7.3 动态报表生成(Jupyter Notebook/ReportLab)原创 2025-05-07 21:16:35 · 1016 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.2 数据分组与透视(CUBE/ROLLUP/GROUPING SETS)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.2 数据分组与透视(CUBE/ROLLUP/GROUPING SETS)原创 2025-05-05 21:19:40 · 1453 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.1 客户分群分析(RFM模型构建)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.1 客户分群分析(RFM模型构建)原创 2025-05-05 22:39:15 · 1047 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.4 数据故事化呈现(报告结构设计/业务价值提炼)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.4 数据故事化呈现(报告结构设计/业务价值提炼)原创 2025-05-08 22:18:18 · 1066 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.3 商品销售预测模型
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.3 商品销售预测模型原创 2025-05-09 18:13:33 · 1002 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.5 清洗流程自动化(存储过程/定时任务)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.5 清洗流程自动化(存储过程/定时任务)原创 2025-05-05 14:04:31 · 1123 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-D. 扩展插件列表(PostGIS/PostgREST等)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-D. 扩展插件列表(PostGIS/PostgREST等)原创 2025-05-14 22:46:04 · 1354 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.1 数据质量评估指标(完整性/一致性/准确性)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.1 数据质量评估指标(完整性/一致性/准确性)原创 2025-05-04 09:37:14 · 1242 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.2 数据类型转换(CAST函数/自定义函数)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.2 数据类型转换(CAST函数/自定义函数)原创 2025-05-04 23:57:55 · 1558 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.2 缺失值检测与处理(NULL值填充/删除策略)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.2 缺失值检测与处理(NULL值填充/删除策略)原创 2025-05-04 09:48:43 · 1176 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-A. PostgreSQL常用函数速查表
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-A. PostgreSQL常用函数速查表原创 2025-05-14 22:15:33 · 1228 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.3 相关性分析(PEARSON/SPEARMAN相关系数)
技术书籍:PostgreSQL数据分析实战:从数据清洗到可视化全流程:第三部分 数据分析与建模-第5章 数据分析核心技术-5.3 相关性分析(PEARSON/SPEARMAN相关系数)原创 2025-05-05 21:44:10 · 1093 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.1 日期时间标准化(时区转换/格式统一)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.1 日期时间标准化(时区转换/格式统一)原创 2025-05-04 23:17:21 · 1321 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.4 异构数据源整合(CSV/JSON/Excel数据导入)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.4 异构数据源整合(CSV/JSON/Excel数据导入)原创 2025-05-05 13:32:45 · 1531 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.3 地理信息处理(PostGIS扩展/空间数据查询)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.3 地理信息处理(PostGIS扩展/空间数据查询)原创 2025-05-07 11:29:46 · 1194 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】7.1 主流可视化工具对比(Tableau/Matplotlib/Python库)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】7.1 主流可视化工具对比(Tableau/Matplotlib/Python库)原创 2025-05-07 13:12:17 · 1237 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.1 基础图表绘制(折线图/柱状图/散点图)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】8.1 基础图表绘制(折线图/柱状图/散点图)原创 2025-05-07 23:44:26 · 962 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-B. 错误代码与解决方案
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】附录-B. 错误代码与解决方案原创 2025-05-14 22:26:22 · 946 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.4 模型部署与定期评估
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】金融风控分析案例-10.4 模型部署与定期评估原创 2025-05-13 23:31:19 · 1107 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.3 数据脱敏与安全(模糊处理/掩码技术)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.3 数据脱敏与安全(模糊处理/掩码技术)原创 2025-05-05 11:14:59 · 1252 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.1 业务场景与数据准备
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】电商数据分析案例-9.1 业务场景与数据准备原创 2025-05-08 22:35:42 · 1117 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.4 时间序列分析(窗口函数处理时间数据)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】6.4 时间序列分析(窗口函数处理时间数据)原创 2025-05-07 12:33:58 · 1474 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.4 数据抽样(简单随机抽样/分层抽样)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】5.4 数据抽样(简单随机抽样/分层抽样)原创 2025-05-05 22:08:51 · 1436 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】2.5 事务与锁机制(ACID特性/事务控制语句)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】2.5 事务与锁机制(ACID特性/事务控制语句)原创 2025-05-04 09:23:35 · 337 阅读 · 0 评论 -
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】2.4 正则表达式与文本处理(LIKE/REGEXP_MATCHES)
【PostgreSQL数据分析实战:从数据清洗到可视化全流程】2.4 正则表达式与文本处理(LIKE/REGEXP_MATCHES)原创 2025-05-04 08:55:45 · 419 阅读 · 0 评论