数据开发效率和有限算力的冲突问题

数据开发流程优化

数据治理工作随想 - 数据开发效率和有限算力的冲突问题

背景: 银行的大数据平台算力有限,再加上数据探查分析人员使用SQL查询的习惯不够严谨,经常全表扫描,导致大数据平台的算力被占用完,影响到数据开发人员的工作效率。为解决这一问题,数据算力管理团队提出了上缴所有任务发布的权限。 数据开发团队的数据报表产出需要和系统做联调,但是和传统的软件开发不同,数据的测试工作是在生产环...

Read More