<svg xmlns="http://www.w3.org/2000/svg" style="display: none;"> <path stroke-linecap="round" d="M5,0 0,2.5 5,5z" id="raphael-marker-block" style="-webkit-tap-highlight-color: rgba(0, 0, 0, 0);"></path> </svg> <p><img src="https://i-blog.csdnimg.cn/direct/7321f8af53d5438ebfc7f3115a0106ec.png#pic_center" alt="在这里插入图片描述"></p> 讯享网
在数据仓库中我们维护了大量的开发任务，但是随着业务的发展、数据处理逻辑的更迭，以及人员变动等原因，这些开发任务越来越复杂以及越来越难维护。由于不同时期、不同开发同学的开发规范不同会给任务带来一定的风险隐患。这时候就需要通过数据治理来规避其中的风险。可以是事后治理，即通过离线任务筛选出不符合规范的任务，也可以是事前治理，即在任务上线前进行检查操作。无论是事前还是事后都需要一种检查器帮助用户发现问题。
针对数据研发，我们提供了不同的数据治理检查器，下面提供几个示例。
如果任务中存在 SELECT * 用法，未指定查询字段会增加计算资源的消耗。因此这个检查器的用途就是判断任务是否存在 SELECT * 用法。初看这个需求觉得非常简单，首先想到的就是使用正则表达式进行匹配。但是使用正则表达式需要考虑很多特殊情况，实际做下来并没有想象中的那么简单，例如如下 SQL：
讯享网
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请联系我们，一经查实，本站将立刻删除。
如需转载请保留出处：https://51itzy.com/kjqy/197334.html