DLH元数据管理

概览

DLH组件是基于Hive的数据湖仓库服务，融合批处理、交互式及流处理，具备数据协同分析能力。

在DLH组件元数据管理的概览页，您可以了解以下内容：

• 元数据统计信息：数据库、数据表、数据列、数据流在当前时刻的总数量统计。

• 数据库关系图：通过选择数据库可查看当前时刻下指定数据库内包含的数据表之间的关系图，点击某数据表图标可查看指定数据表内包含的数据列之间的关系图。通过此关系图可以快速的了解某个数据库包含哪些数据表，某个数据表包含哪些数据列。

• 数据流耗时Top5：展示指定时间内耗时排名处于Top5的数据流，鼠标悬停在数据流柱状图上可查看指定数据流的实际耗时信息。

• 业务类别使用数量Top3：展示当前时刻被元数据关联使用次数的排名处于Top3的业务类别，鼠标悬停在业务类别饼图上可查看指定业务类别被关联的数量。

• 数据库存储空间Top5：展示当前时刻已使用的存储空间大小处于Top5的数据库，鼠标悬停在数据库柱状图上可查看指定数据库的当前已使用的存储空间。

• 数据表存储空间Top5：展示当前时刻已使用的存储空间大小处于Top5的数据表，鼠标悬停在数据表柱状图上可查看指定数据表的当前已使用的存储空间。

元数据

DLH组件的元数据管理包含数据库、数据表、数据流、数据列、列血缘共5种类型的元数据，所有元数据信息都是后台自动同步至系统中的。

·          数据库、数据表、数据流、数据列、列血缘的元数据管理操作类似，不做区分说明。 ·          单击元数据管理页面左侧导航树的[元数据]模块后面的刷新图标，可实时刷新元数据信息。

 

1.      查看元数据列表

通过在页面左上角的搜索框设置相关筛选项，可查看目标元数据列表，默认展示全部的元数据信息。单击图标可刷新元数据列表；单击图标并通过勾选可自定义设置元数据列表中展示的内容。

 

1. 在元数据管理页面左侧导航树的[元数据]模块下，分别选择数据库、数据表、数据流、数据列或列血缘，可以查看对应的元数据列表。

2. 在元数据列表页面，部分参数说明如下：

• 名称：单击名称可跳转至元数据详情页面。

• 所有者：该元数据的创建者。对于数据库元数据，缺省拥有default（由public创建）；对于数据表、数据流、数据列、列血缘，均为缺省数据。

• 状态：包括“ACTIVE”和“DELETED”两种：

• 元数据处于“ACTIVE”状态时，表示该元数据对应的数据信息处于正常使用状态。

• 元数据处于“DELETED”状态时，表示该元数据对应的数据信息已被删除，该元数据仅做管理使用。

• 标签：该元数据的标签信息，可在元数据详情的基本属性页面进行自定义添加或修改，主要便于检索和标识。

• 描述：该元数据的描述信息，是由后台自动同步至系统中的。

• 业务类别：该元数据相关联的业务类别，可进行自定义添加或删除。

2.      查看元数据详情

·          元数据处于“DELETED”状态时，不支持对其基本属性的业务属性和标签执行新增、编辑、删除等操作，不支持对其关联业务类别执行新增、编辑、删除等操作， ·          元数据处于“ACTIVE”状态时，对于关联业务类别可执行新增、编辑、删除等操作；对于继承业务类别，仅支持查看，不支持修改。

 

1. 在元数据管理页面左侧导航树的[元数据]模块下，分别选择数据库、数据表、数据流、数据列或列血缘，可以查看对应的元数据列表。

2. 在元数据列表页面，单击名称可跳转至详情页面。

• 基本属性：包括该元数据的技术属性、业务属性和标签信息。

• 技术属性：展示该元数据归属的集群名、所处位置、名称、所有者、所有者类型等信息，均为后台自动同步至系统中的。

• 业务属性：根据业务需求可进行自定义添加或修改。

• 标签：根据需求可进行自定义添加或修改，主要便于检索和标识。

• 血缘跟踪：数据库没有血缘跟踪。单击血缘关系图中的各节点图标可查看选中数据表、数据流、数据列或列血缘的基本信息。

• 数据表血缘关系图：展示当前表与其他表之间的血缘走向关系，表与表之间的关系通过数据流表示，表与数据流之间的线表示关系走向（走向当前表的线代表血缘，当前表走向其他的线代表影响）。

• 数据流血缘关系图：展示当前数据流与其他关联表之间的血缘走向关系。

• 数据列血缘关系图：展示当前列与其他列之间的血缘走向关系，列与列之间的关系通过列血缘表示，列与列血缘之间的线表示关系走向（走向当前列的线代表血缘，当前列走向其他的线代表影响）。

• 列血缘血缘关系图：展示列与列之间的血缘走向关系，列与列血缘之间的线表示关系走向（走向当前列血缘的线代表血缘，当前列血缘走向其他列的线代表影响）。

• 业务类别：展示该元数据相关联的业务类别，包括关联业务类别和传播业务类别。其中关联业务类别可进行自定义编辑或删除，传播业务类别仅支持查看。

• 业务类别名称：单击名称可跳转至业务类别详情页面。

• 传播来源：对于关联业务类别，该项值为空；对于传播业务类别，该项值表示传播给该元数据此业务类别的源，单击名称可跳转至详情页面。

• 属性：展示添加业务类别时，配置的属性值。单击操作列的<编辑>按钮，可修改属性值。

• 其他信息：查看该元数据包含的其他信息，比如：某个数据库包含哪些数据表，某个数据表包含哪些数据列。数据流和数据列没有子信息。

业务类别

DLH组件元数据关联的业务类别缺省为空，根据实际使用需要，需要自定义添加。

1.      添加业务类别

·          业务类别名称具有唯一性，在系统中创建多个业务类别时名称不能重复。业务类别名称一经添加，后续不支持修改。 ·          支持在某业务类别下添加子业务类别，业务类别父子关系最多支持三级。 ·          根据实际使用需求，可为业务类别添加属性信息。属性可在添加业务类别时直接添加，也可在业务类别添加完成后再单独添加。在添加业务类别时直接添加的属性信息不支持修改和删除。

 

1. 在元数据管理页面左侧导航树的[业务类别]模块下，鼠标悬停在某业务类别对应的图标。

2. 通过选择<添加业务类别>按钮可为该业务类别添加子业务类别。

3. 在添加业务类别弹窗中，部分参数说明如下：

• 父业务类别：该类别归属的父业务类别，不可修改。在根节点添加业务类别时，无父业务类别。

• 名称：自定义输入符合命名规则的业务类别名称。

• 添加属性：可选。根据实际使用需求，可选择添加属性信息，此时需填写属性名称和对应的属性值类型。

4. 相关信息配置完成后，单击<确定>按钮即可完成业务类别的添加。

2.      删除业务类别

·          若某业务类别已被元数据所关联，则不支持删除。 ·          删除某业务类别时，该业务类别包含的子业务类别也会被同时删除。

 

1. 在元数据管理页面左侧导航树的[业务类别]模块下，鼠标悬停在某业务类别对应的图标。

2. 通过选择<删除>按钮并在弹窗中进行确定后，即可删除该业务类别。

3.      查看业务类别详情

根据实际使用需求，可为业务类别添加属性，属性可在添加业务类别时直接添加，也可在业务类别添加完成后再单独添加。在添加业务类别时直接添加的属性信息不支持修改和删除。

 

1. 在元数据管理页面左侧导航树的[业务类别]模块下，单击某业务类别名称可进入对应的业务类别详情页面。

2. 在业务类别详情页面，可查看基本信息和元数据列表。

• 业务类别基本信息：展示该业务类别的直接子类别和父类别，可查看其类别属性或执行添加属性的操作。

• 元数据列表：展示该业务类别关联的所有元数据列表。

• 名称：单击名称可跳转至元数据详情页面。

• 业务类别：可查看该元数据关联的所有业务类别，并可进行自定义添加或删除。