数据质量监控Griffin——使用

数据质量监控Griffin——使用一、环境生产环境数据质量监控griffin:地址:http://XXXXXXXXX:4200/#/health账号:admin密码:123456二、Griffin是干什么的?官方介绍大数据模块是大数据平台中数据方案的一个功能组件,Griffin(以下简称Griffin)是一个开源的大数据数据解决质量模式,它支持所有数据和流数据方式检测质量模式,可以从不同维度(不同标准执行完毕后检查源端和目标端的数据数量是否一致、源表的数据空值数量等)收集数据资产,从而提高数据的准确度、可信度。在格里芬的架

大家好,又见面了,我是你们的朋友全栈君。

一、环境

生产环境

数据质量监控griffin:

地址:http://XXXXXXXXX:4200/#/health

账号:admin

密码:123456

二、Griffin是干什么的?

官方介绍

大数据模块是大数据平台中数据方案的一个功能组件,Griffin(以下简称Griffin)是一个开源的大数据数据解决质量模式,它支持所有数据和流数据方式检测质量模式,可以从不同维度(不同标准执行完毕后检查源端和目标端的数据数量是否一致、源表的数据空值数量等)收集数据资产,从而提高数据的准确度、可信度。

在格里芬的架构中,主要分为定义、测量和分析三个部分,如下图所示:

在这里插入图片描述

各部分的职责如下:

  • Define:主要负责定义数据质量统计的维度,比如数据质量统计的时间跨度、统计的目标(源端和目标端的数据数量是否一致,数据源里某一字段的非空的数量、不重复值的数量、最大值、最小值、top5的值数量等)

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/142891.html原文链接:https://javaforall.net

(0)
上一篇 2022年5月22日 下午6:20
下一篇 2022年5月22日 下午6:20


相关推荐

  • java structs_java深入探究12-框架之Structs

    java structs_java深入探究12-框架之Structs注意每次修改配置文件后必须项目重启 Structs2 structs1 xworkStruct2 框架预先实现了一些功能 1 请求数据的封装 2 文件上传的功能 3 对国际化功能的简化 4 文件效验功能 1 开发 Structs 框架的步骤 1 引入 8 大 jar 包 commons fileupload 1 2 2 jar 文件上传相关包 commons io 2 0 1 jarstruts2 core 2 3

    2026年3月17日
    1
  • 分布式ID详解

    分布式ID详解背景分布式 ID 用在分布式系统中在我们的业务需求中通常有需要一些唯一的 ID 来记录我们某个数据的标识 某个用户的 ID 某个订单的单号某个信息的 ID 为什么需要分布式 ID1 如果 id 我们使用的是数据库的自增长类型 在分布式系统中需要分库和分表 会有两个相同的表 有可能产生主键冲突分布式 ID 类型 全球唯一 不会冲突 UUID 全球唯一 字符串数据库表来维护 ID 新建一张表来产生 ID 使用哪种数据库由自己选择 Mysql MongoDB Redis 性能不好 字符串或数字类型雪花 ID 时间

    2026年3月18日
    2
  • 茂名石化乙烯项目_茂名市天源石化有限公司

    茂名石化乙烯项目_茂名市天源石化有限公司“现在看起来很好,但过程真的不容易。”一直分管茂南石化工业园的区政协副主席、区政府党组成员卢飞说,工业园的建成,得益于茂石化炼油厂卫生防护距离搬迁安置项目,而卫生防护安置搬迁拆迁的工作过程非常艰辛。栽下梧桐树,引来金凤凰。随着园区的加快建设和基础设施的日臻完善,一个个好项目、大项目先后落户园区。园区分管领导抓住优势,紧紧围绕主导产业和产业发展方向,进一步明确招商思路,不断扩充优质产业项目。“其中,总投资18亿元的茂名天源石化丙烯项目落地园区,我们花了很多功夫才争取到这个项目。”卢飞介绍道..

    2022年10月15日
    5
  • xhr 的简单使用

    xhr 的简单使用Ajax Asynchronous 异步的 JavaScript 和 XML Ajax 不是新的编程语言 而是一种使用现有标准的新方法 它最大的优点是在不重新加载整个页面的情况下 可以与服务器交换数据并更新部分网页内容 并且不需要任何浏览器插件 但需要用户允许 JavaScript 在浏览器上执行 总的来说 就是 ajax 是数据请求方式的一

    2026年3月17日
    3
  • 即梦4.0测评 – 看看这20+提示词的测试效果

    即梦4.0测评 – 看看这20+提示词的测试效果

    2026年3月12日
    3
  • 能关闭一切进程的无敌命令

    能关闭一切进程的无敌命令

    2021年7月29日
    358

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号