元数据 订阅
元数据(Metadata),又称中介数据、中继数据,为描述数据的数据(data about data),主要是描述数据属性(property)的信息,用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。元数据算是一种电子式目录,为了达到编制目录的目的,必须在描述并收藏数据的内容或特色,进而达成协助数据检索的目的。都柏林核心集(Dublin Core Metadata Initiative,DCMI)是元数据的一种应用,是1995年2月由国际图书馆电脑中心(OCLC)和美国国家超级计算应用中心(National Center for Supercomputing Applications,NCSA)所联合赞助的研讨会,在邀请52位来自图书馆员、电脑专家,共同制定规格,创建一套描述网络上电子文件之特征。元数据是关于数据的组织、数据域及其关系的信息,简言之,元数据就是关于数据的数据。 [1] 展开全文
元数据(Metadata),又称中介数据、中继数据,为描述数据的数据(data about data),主要是描述数据属性(property)的信息,用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。元数据算是一种电子式目录,为了达到编制目录的目的,必须在描述并收藏数据的内容或特色,进而达成协助数据检索的目的。都柏林核心集(Dublin Core Metadata Initiative,DCMI)是元数据的一种应用,是1995年2月由国际图书馆电脑中心(OCLC)和美国国家超级计算应用中心(National Center for Supercomputing Applications,NCSA)所联合赞助的研讨会,在邀请52位来自图书馆员、电脑专家,共同制定规格,创建一套描述网络上电子文件之特征。元数据是关于数据的组织、数据域及其关系的信息,简言之,元数据就是关于数据的数据。 [1]
信息
优    点
自描述,设计
外文名
Metadata
拼    音
yuánshùjù
本    质
描述数据属性的信息
中文名
元数据
目    的
识别、评价、追踪资源达有效管理
解    释
关于数据的数据
元数据定义
元数据被定义为:描述数据的数据,对数据及信息资源的描述性信息。元数据(Metadata)是描述其它数据的数据(data about other data),或者说是用于提供某种资源的有关信息的结构数据(structured data)。元数据是描述信息资源或数据等对象的数据,其使用目的在于:识别资源;评价资源;追踪资源在使用过程中的变化;实现简单高效地管理大量网络化数据;实现信息资源的有效发现、查找、一体化组织和对使用资源的有效管理。 元数据的基本特点主要有:a)元数据一经建立,便可共享。元数据的结构和完整性依赖于信息资源的价值和使用环境;元数据的开发与利用环境往往是一个变化的分布式环境;任何一种格式都不可能完全满足不同团体的不同需要;b)元数据首先是一种编码体系。元数据是用来描述数字化信息资源,特别是网络信息资源的编码体系,这导致了元数据和传统数据编码体系的根本区别;元数据的最为重要的特征和功能是为数字化信息资源建立一种机器可理解框架。元数据体系构建了电子政务的逻辑框架和基本模型,从而决定了电子政务的功能特征、运行模式和系统运行的总体性能。电子政务的运作都基于元数据来实现。其主要作用有:描述功能、整合功能、控制功能和代理功能。由于元数据也是数据,因此可以用类似数据的方法在数据库中进行存储和获取。如果提供数据元的组织同时提供描述数据元的元数据,将会使数据元的使用变得准确而高效。用户在使用数据时可以首先查看其元数据以便能够获取自己所需的信息。在数据仓库领域中,元数据按用途分成技术元数据和业务元数据。首先,元数据能提供基于用户的信息,如记录数据项的业务描述信息的元数据能帮助用户使用数据。其次,元数据能支持系统对数据的管理和维护,如关于数据项存储方法的元数据能支持系统以最有效的方式访问数据。具体来说,在数据仓库系统中,元数据机制主要支持以下五类系统管理功能:(1)描述哪些数据在数据仓库中;(2)定义要进入数据仓库中的数据和从数据仓库中产生的数据;(3)记录根据业务事件发生而随之进行的数据抽取工作时间安排;(4)记录并检测系统数据一致性的要求和执行情况;(5)衡量数据质量。软件构造领域的定义在软件构造领域,元数据被定义为:在程序中不是被加工的对象,而是通过其值的改变来改变程序的行为的数据。它在运行过程中起着以解释方式控制程序行为的作用。在程序的不同位置配置不同值的元数据,就可以得到与原来等价的程序行为。在图书馆与信息界,元数据被定义为:提供关于信息资源 或数据的一种结构化的数据,是对信息资源的结构化的描述。其作用为:描述信息资源或数据本身的特征和属性,规定数字化信息的组织,具有定位、发现、证明、评估、选择等功能。一般认为,所谓元数据是关于数据的数据,或关于数据的结构化的数据。从已有的结论看,元数据的含义是逐渐发展的。元数据一词,早期主要指网络资源的描述数据,用于网络信息资源的组织;其后,逐步扩大到各种以电子形式存在的信息资源的描述数据。元数据这一术语实际用于各种类型信息资源的描述记录。此外,元数据在地理界,生命科学界等领域也有其相应的定义和应用。
收起全文
精华内容
下载资源
问答
  • 元数据

    千次阅读 2018-08-27 20:44:58
    1.1 元数据的基本概述: 元数据(Metadata),为描述数据的数据(data about data),主要是描述数据属性(property)的信息, 为了更好理解别人数据库工具类底层的原理。 1.2 ParameterMetaData(参数...

     1.1 元数据的基本概述

    • 元数据(Metadata),为描述数据的数据(data about data),主要是描述数据属性property)的信息 为了更好理解别人数据库工具类底层的原理。

    1.2 ParameterMetaData(参数元数据)

    •  常用的方法:
    1. getParameterMetaData()  获取参数元数据。
    2. getParameterCount()  获取参数的个数。
    3. getParameterTypeName()  获取参数类型,但是mysql不支持

     

    package metadata;
    
    import Utils.JDBCUtils;
    import org.junit.Test;
    
    import java.sql.Connection;
    import java.sql.ParameterMetaData;
    import java.sql.PreparedStatement;
    import java.sql.SQLException;
    
    public class Demo01 {
    
        @Test
        public void testParameter() throws SQLException {
            //获取连接
            Connection connection = JDBCUtils.getConnection();
            //准备SQL语句,获得预编译对象
            String sql = "insert into student(id,name)values(?,?)";
            PreparedStatement pst = connection.prepareStatement(sql);
            //获得参数的元数据
            ParameterMetaData pmd =pst.getParameterMetaData();
            System.out.println("当前的sql需要几个参数:"+pmd.getParameterCount());
    
            //MySQL不支持获取参数类型 Parameter metadata not available for the given statement
            //System.out.println("第一个参数的类型:"+pmd.getParameterType(1));
        }
    }
    

    1.3 ResultSetMetaData(结果集元数据):

    •  常用的方法:
    1. getMetaData() 得到结果集的元数据
    2. int getColumnCount() 返回此 ResultSet对象中的列数
    3. String getColumnName(int column) 获取指定列的名称
    4. String getColumnTypeName(int column) 获取指定列的数据库特定类型名称

     

    /*
            结果元数据
         */
        @Test
        public void testResultSetMetaData() throws SQLException {
            //获取连接
            Connection connection = JDBCUtils.getConnection();
            //准备sql语句,获取预编译对象
            String sql = "select * from student where id=1";
            PreparedStatement pst = connection.prepareStatement(sql);
            //执行sql语句
            ResultSet  rs = pst.executeQuery();
            //获得参数的元数据
            ResultSetMetaData metaData = rs.getMetaData();
    
            //获取到当前用户查询的列数
            int columnCount = metaData.getColumnCount();
            for (int i = 0; i < columnCount; i++) {
                System.out.println("列名:"+metaData.getColumnName(i+1)+"列类型:"+metaData.getColumnTypeName(i+1));
            }
    
        }

    更多资料,搜索或扫码关注公众号:数说Cloud

     

    展开全文
  • 数据元与元数据

    万次阅读 多人点赞 2019-06-05 17:35:22
    元数据:描述其它数据的数据(data about other data) 元数据是关于数据的数据,在某些时候不特指某个单独的数据,可以理解为是一组用来描述数据的信息组/数据组,该信息组/数据组中的一切数据、信息,都描述/反映...

    元数据:描述其它数据的数据(data about other data)

    元数据是关于数据的数据,在某些时候不特指某个单独的数据,可以理解为是一组用来描述数据的信息组/数据组,该信息组/数据组中的一切数据、信息,都描述/反映了某个数据的某方面特征,则该信息组/数据组可称为一个元数据。

    元数据可以为数据说明其元素或属性(名称、大小、数据类型等),或其结构(长度、字段、数据列),或其相关数据(位于何处、如何联系、拥有者)。

    在日常生活中,元数据无所不在。只要有一类事物,就可以定义一套元数据。

    举个例子:在电影数据库IMDB上可以查到每一部电影的信息。IMDB本身也定义了一套元数据,用来描述每一部电影。下面是它的一级元数据,每一级下面又列出了二级元数据,总共加起来,可以从100多个方面刻画一部电影:

    Cast and Crew(演职人员)、Company Credits(相关公司)、Basic Data(基本情况)、Plot & Quotes(情节和引语)、Fun Stuff(趣味信息)、Links to Other Sites(外部链接)、Box Office and Business(票房和商业开发)、Technical Info(技术信息)、Literature(书面内容)、Other Data(其他信息)。

    元数据最大的好处是,它使信息的描述和分类可以实现结构化,从而为机器处理创造了可能。

    数据元:可理解为数据的基本单元

    卫生信息基本数据元规范和定义了医药卫生领域所有相关信息的唯一中文名称与代码,并且代码以字母、汉字、数字式的字符串形式表示。

    数据元列举并定义了特定语义环境中的一种信息资源。

    完整的数据元名称=对象类术语+特征类术语+表示类术语+(限定类术语)

    其中:

    一个数据元有且仅有一个对象类术语(object class):是现实世界或抽象概念中事物的集合,有清楚的边界和含义,因其特性和行为遵循同样的规则而能加以标识。

    一个数据元有且仅有一个特征类术语(property):是对象类的所有个体所共有的某种性质,也是对象有别于其他成员的依据,是用来区分和识别事物的一种手段。特征类术语是任何一个数据元名称所必须的成分,在数据元概念可完整、准确、无歧义表达的情况下,其他术语可以酌情简略。

    一个数据元有且仅有一个表示类术语(representation):是值域、数据类型和表示方式的组合,也包括计量单位和字符集等信息。当表示类术语与特征类术语有重复或部分重复时,可从名称中将冗余词删除。

    限定类术语由专业领域给定,限定类术语是可选的。

    数据元基本模型

    数据元与元数据的区别和联系

    1. 元数据不可能涵盖理解数据元所要表示的数据所必需的所有信息。

    2. 数据元的相关信息是任何一个(组织的)元数据的一个完整的组成部分。

    3. 元数据的每一个元素都是一个数据元,用符合数据元标准的元数据属性和描述方法来说明元数据。

    4. 将元数据存储于一个库中,并使之条理化就需要建模,建模就需要从数据元的注册系统中或库中获取元数据。

    5. 元数据,它是以一种一致、标准的方式来表达的数据元。

    6. 元数据与数据元字典格式均由行号、中文名称、英文名称、标识符(短语)、定义、约束/条件、最大出现次数、数据类型、数据的值域等属性组成。不同之处是数据元字典格式中另有语境和同义词名称等属性。

    总而言之,元数据和数据元的定义是从不同角度论述的。由于描述的侧重面不同,元数据和数据元的描述属性也有些区别,但是元数据和数据元的字典格式是基本一致的。

    ------------------------------------------------------------------------------------------------

    1元数据Metadata

    1.1元数据概念

    1、主要是描述数据属性(property)的信息;

    2、描述数据的数据;

    3、关于数据的结构化数据;

    4、描述数据的内容、覆盖范围、质量、管理方式、数据的所有者、数据的提供方式等信息,是数据和数据用户之间的桥梁。

    举例:

    学生信息表包括:姓名、性别、学号等。

    姓名、性别、学号都是数据元,但是这些数据元有自己的元数据,即描述数据,分别是长度、类型、值域等。

    对于学生信息表而言,姓名、性别、学号是描述学生信息的数据,是它的元数据。

    数据是手提箱,而元数据是它上面的标牌。

    数据是文件夹,而元数据是文件夹上面的标签。

    1.2元数据的作用

    1、数据描述:对信息对象的内容属性等的描述能力是元数据最基本的功能。

    2、数据检索:支持用户发现资源的能力,即利用元数据来更好地组织信息对象建立他们之间的关系为用户提供多层次多途径的检索体系,从而有利于用户便捷快速的发现其真正需要的信息资源。

    3、数据选择:支持用户在不必浏览信息对象本身的情况下能够对信息对象有基础的了解和认识从而决定对检出信息的取舍。

    4、数据定位:提供信息资源本身的位置方面的信息,如DOI、URL、URN等信息,由此可准确获知信息对象之所在,便于信息的获取。

    5、数据管理:保存信息资源的加工存档结构使用管理等方面的相关信息权限管理版权、所有权、使用权、防伪措施、电子水印、电子签名等。

    6、数据评估:保存资源被使用和被评价的相关信息,通过对这些信息的使用分析,方便资源的建立与管理者更好的组织资源并在一定程度上帮助用户确定该信息资源在同类资源中的重要性。

    2数据元(Data element)

    2.1数据元概念

    1、用一组属性描述定义、标识、表示和允许值的数据单元。

    2、又称数据类型,通过定义、标识、表示以及允许值等一系列属性描述的数据单元。在特定的语义环境中被认为是不可再分的最小数据单元。

    3、数据元一般由三部分组成:对象、特性、表示

    举例:

    “执业类别代码”为数据元,“01”为数据元的值。

    “执业类别代码”中,“执业”为对象词,“类别”是该数据元的特性词,“代码”是该数据元的表示词。

    2.2数据元的作用

    1、数据元本身也是数据单元,即也是数据。

    2、它是一个用来对各行业的数据进行自身规范化的一个方法或一套指导的理论。

    3、用这一套方法对行业数据进行统一的名、型、值规范及分类。

    4、规划好行业数据元之后,可以为行业构建出统一、集成的、稳定的数据模型奠定基础,同时它也为数据交换奠定基础。

    3元数据管理

    3.1元数据管理的建设目标

    3.2元数据管理的范围

    4资源目录

    4.1资源目录要解决的问题

    4.2业务流程示意图

    4.3资源目录功能特点

    5参考资料

    https://baike.baidu.com/item/%E5%85%83%E6%95%B0%E6%8D%AE/1946090?fr=aladdin

    https://wenku.baidu.com/view/9789bb30f68a6529647d27284b73f242336c31ff.html

    https://baike.baidu.com/item/%E6%95%B0%E6%8D%AE%E5%85%83/7681154?fr=aladdin

    展开全文
  • 数据源、元数据、数据元

    千次阅读 2020-01-10 15:14:57
    ##数据源(data source) 顾名思义,数据的来源,是提供某种所需要数据的器件或原始媒体。...##元数据(metadata) 描述其他数据的数据(data about other data)。 1、主要是描述数据属性(property)的信息; 2...

    ##数据源(data source)
    顾名思义,数据的来源,是提供某种所需要数据的器件或原始媒体。在数据源中存储了所有建立数据库连接的信息。就像通过指定文件名称可以在文件系统中找到文件一样,通过提供正确的数据源名称,你可以找到相应的数据库连接。

    ##元数据(metadata)
    描述其他数据的数据(data about other data)。
    1、主要是描述数据属性(property)的信息;
    2、描述数据的数据;
    3、关于数据的结构化数据;
    4、描述数据的内容、覆盖范围、质量、管理方式、数据的所有者、数据的提供方式等信息,是数据和数据用户之间的桥梁。

    举例:
    学生信息表包括:姓名、性别、学号等。
    姓名、性别、学号都是数据元,但是这些数据元有自己的元数据,即描述数据,分别是长度、类型、值域等。
    对于学生信息表而言,姓名、性别、学号是描述学生信息的数据,是它的元数据。
    数据是手提箱,而元数据是它上面的标牌。
    数据是文件夹,而元数据是文件夹上面的标签。

    ##数据元(Data element)
    可理解为数据的基本单元。
    数据元概念:
    1、用一组属性描述定义、标识、表示和允许值的数据单元。
    2、又称数据类型,通过定义、标识、表示以及允许值等一系列属性描述的数据单元。在特定的语义环境中被认为是不可再分的最小数据单元。
    3、数据元一般由三部分组成:对象、特性、表示

    举例:
    “执业类别代码”为数据元,“01”为数据元的值。
    “执业类别代码”中,“执业”为对象词,“类别”是该数据元的特性词,“代码”是该数据元的表示词。

    展开全文
  • Atlas(1):前言-从元数据元数据管理

    万次阅读 2021-01-08 20:07:37
    而数据治理的关键就在于元数据管理,我们要知道数据的来龙去脉,才能对数据进行全方位的管理,监控,洞察。 “元数据管理是企业数据治理的基础”,在数据治理战略实施的时候,这是我们经常会听到看到的一句话。但是...

    数据治理是大佬们最近谈的一个火热的话题。不管国家层面,还是企业层面现在对这个问题是越来越重视。数据治理要解决数据质量,数据管理,数据资产,数据安全等等。而数据治理的关键就在于元数据管理,我们要知道数据的来龙去脉,才能对数据进行全方位的管理,监控,洞察。

    “元数据管理是企业数据治理的基础”,在数据治理战略实施的时候,这是我们经常会听到看到的一句话。但是,数据治理的概念在国内还并未普及,如何打好数据治理的基础更是一头雾水。作为一名企业管理人员、一名IT人员、或者是一名数据行业从业者,理解数据治理的首要任务,就是——理解元数据,理解元数据管理


    一,元数据

    要理解元数据首先要知道“元”是什么。元数据意思是“描述数据的数据”。元数据起源于图书馆管理系统,我们便从图书中去解释元数据的概念吧。

    举个栗子:
    在这里插入图片描述

    一本书,书的封面和内页都向我们展示了这样的元数据信息:标题、作者姓名、出版商和版权细节、背面的描述、目录、页码。这个栗子可以看出,我们日常生活中,都会有相应的元数据信息保留下来。在数据治理中,元数据便是对于数据的描述,存储着关于数据的数据信息。我们可以通过这些元数据去管理和检索我们想要的“这本书”。



    二,企业中的元数据&元数据管理

    在生活中,人们通过元数据来进行认知和管理。那在企业当中,元数据又有什么作用和意义呢?随着互联网的发展,近几年企业每年收集和使用的数据成倍增长,很多企业大数据环境中的数据形态很多样,且标准不统一,在这些类型不同的数据之间要进行采集、传播和共享就成了难事。这就势必要求企业对这些数据进行统一标准的管控,即元数据管理。企业元数据管理,首先需要对企业所有元数据进行整体规划、抽象描述,进而设计出所需元模型。

    数据、元数据、元模型的关系图

    在这里插入图片描述

    有了元模型,就能根据元模型来采集元数据信息。这样一来,就能通过层层关键信息将重要目标展现出来。

    在这里插入图片描述



    三,企业元数据管理的价值


    1 方便全面梳理企业信息资产

    一款适合的元数据管理工具可以通过自动化的采集方式,帮助企业完成数据信息、服务信息与业务信息的采集,自动调取企业内部的元数据,为企业展现完整信息资产,从而进一步帮助企业集中管理所有信息资产,方便数据的交互和共享。

    企业数据通常呈现碎片化分布,一共有多少系统,各系统之间有哪些关联,对应的关联表又有哪些,企业一时很难厘清的。

    在这里插入图片描述
    元数据管理平台就能解决上述问题。其内置丰富的采集适配器,且适配器采用可扩展设计,最大限度满足自动化采集需求。



    2 多种分析方式,迅速响应业务数据问题

    在企业中,往往会遇到业务人员发现分析报表中有问题,要求IT部门进行修改,但由于数据加工链路长,修改将涉及到多个部门,甚至整个公司,很难精准定位到问题数据的相关表和字段。

    在这里插入图片描述

    元数据管理平台通过多种分析方式帮助企业分析数据流向,具体到字段级的数据解析,如血缘分析、影响分析、关联度分析等,帮助企业获取数据上下游、对象关联对象等等关系,快速定位问题字段,帮助企业降低数据问题的定位难度。




    3 全方位检核机制,消除企业数据质量隐患

    由于元数据是很多数据管理活动的基本,所以元数据的质量极为重要。亿信元数据管理平台提供元数据质量检核功能,包括一致性检核、属性填充率检核和组合关系检核,是保障元数据质量的重要手段之一。

    在这里插入图片描述



    4 完善的版本管理,保障企业元数据一致性

    企业在进行元数据管理中,要保证元数据、元模型的一致性和连续性,这样才不会改变元数据结构,避免元数据错乱。

    在这里插入图片描述

    元数据管理平台不仅区分了最新元数据和定版元数据,还提供了历史版本查看和对比,保障了元模型的稳定性,可以追踪或查看项目负责人,问责更加清晰。



    5 元数据变更监控,方便掌握数据资产变化

    实现对元数据实时地变更监控,查看明细信息。并支持变更订阅功能,让用户可随时监察,消除问题隐患。

    在这里插入图片描述

    总结:
    市场上对企业级元数据管理的需求还在不断增长,伴随着需求的增加,企业对数据模型和元数据管理互操作性的标准的关注会明显增加。

    对企业技术人员而言,元数据管理平台通过将分散、存储结构差异大的资源信息进行描述、定位、检索、评估、分析,实现了信息的结构化,为机器处理创造了可能,从而大大降低数据治理人工成本。正因如此,元数据已经成为了很多大型数据治理项目的基础。

    对企业业务人员而言,元数据管理平台通过对业务指标、业务术语、业务规则、业务含义等业务信息进行管控,协助业务人员了解业务含义、行业术语和规则、业务指标取数据口径和影响范围等。

    未来,元数据管理势必将成为数字化转型的核心。

    展开全文
  • 一、元数据 1、数据库的元数据 *元数据:数据库、或者数据库表,表中的字段的一些信息,比如数据库名称,驱动,表中的主键的名称。 *作用:主要完成一些通用型比较高得代码,一般都是使用在框架里面 *在数据库...
  • 数据仓库元数据介绍

    千次阅读 2018-12-04 20:56:56
    元数据(Metadata)类似于这样的电话黄页。 元数据的定义 数据仓库的元数据是关于数据仓库中数据的数据。它的作用类似于数据库管理系统的数据字典,保存了逻辑数据结构、文件、地址和索引等信息。广义上讲,在数据...
  • 数据仓库元数据管理

    千次阅读 2018-09-21 16:11:56
    数据仓库元数据管理元数据元数据分类技术元数据业务元数据系统管理功能 元数据 元数据(Meta Date),主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及ETL的任务运行状态。一般会通过...
  • 数据元&数据字典&元数据

    千次阅读 2016-10-18 11:00:00
    2. 元数据 首先,我们举个例子来看看什么叫做“元”,在后现代主义文学中有一种小说叫作“元小说”,也就是“关于小说的小说”。传统小说就是围绕着主人公描述一系列发生的事件。而元小说则更关心作者是如何写这本...
  • 元数据、数据元、资源目录

    千次阅读 2018-11-30 18:47:00
    1元数据(Metadata) 1.1元数据概念 1、主要是描述数据属性(property)的信息; 2、描述数据的数据; 3、关于数据的结构化数据; 4、描述数据的内容、覆盖范围、质量、管理方式、数据的所有者、数据的提供方式...
  • 主数据与元数据

    万次阅读 2018-07-10 12:39:51
    企业数据管理的内容和范畴通常包含交易数据、主数据以及元数据。以下主要讨论主数据、元数据的概念及应用。主数据和主数据管理的概念企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、...
  • 元数据 and 元数据标准

    千次阅读 2017-02-22 17:42:38
    然而在系统的设计、开发、测试、上线过程中,无论是需求变更还是BUG修改都避免不了数据模型也就是元数据的改动。大到库表结构重新设计,小到一个字段类型的变更,都可能对程序造成影响。我们以往只重视程序功能测试...
  • 数据治理--元数据--元数据的作用

    千次阅读 2019-01-12 23:25:10
    元数据的主要作用 相信看到这个博客,您已经对什么是元数据有了一定的了解,如果还不够了解可以网上搜一下,也可以参见我的另一篇博客“数据治理--元数据--定义”,URL: ...
  • 3分钟全面了解元数据和数据元

    千次阅读 2019-05-14 10:45:26
    元数据:描述其它数据的数据(data about other data) 元数据是关于数据的数据,在某些时候不特指某个单独的数据,可以理解为是一组用来描述数据的信息组/数据组,该信息组/数据组中的一切数据、信息,都描述/反映...
  • 元数据,一个简单的定义是描述数据的数据。在企业中,无论哪里有数据,都有相应的元数据。只有存在完整而准确的元数据,我们才能更好地理解数据并充分利用数据的价值。为了让大家更好地了解什么是元数据,亿信华辰小...
  • 什么是元数据元数据)?

    千次阅读 2018-06-08 14:23:24
    数据是指普通文件中的实际数据,而元数据指用来描述一个文件的特征的系统数据,诸如访问权限,文件拥有者以及文件数据块的分布信息(索引节点的......)等等。在集群文件系统中,分布信息包括文件在磁盘上的位置以及...
  • Nacos元数据

    千次阅读 2019-07-07 09:32:36
    文章目录一、元数据是什么?二、作用是什么?提供描述信息让位服务调用更加灵活三、如何配置?如何为微服务设置元数据呢?控制台设置配置文件指定 一、元数据是什么? 官方描述:...
  • Hadoop元数据

    千次阅读 2019-06-04 08:43:33
    HDFS的元数据包含三部分: 抽象目录树 数据和块映射关系 数据块的存储节点 元数据有两个存储位置: 内存:1、2、3 3在集群启动时,Datanode 通过心跳机制向Namenode发送。 磁盘:1、2 集群启动时需要将磁盘中的...
  • 元数据管理

    千次阅读 2019-05-06 09:56:32
    元数据管理 1、什么是元数据管理? 企业用户在创建了众多数据库信息时,需要一个查询功能可以及时高效地为用户查询数据库信息,如数据源、表以及视图等信息。DataPipeline(www.datapipeline.com)元数据管理功能...
  • 一篇文章搞懂数据仓库:元数据分类、元数据管理

    千次阅读 多人点赞 2020-12-31 15:41:39
    业务元数据 描述 ”数据”背后的业务含义 主题定义:每段 ETL、表背后的归属业务主题。 业务描述:每段代码实现的具体业务逻辑。 标准指标:类似于 BI 中的语义层、数仓中的一致性事实;将分析中的指标进行规范化...
  • 数据治理工具-元数据管理

    千次阅读 2020-04-07 18:40:33
    数据治理里面最关键的元数据管理,元数据打通数据源、数据仓库、数据应用,记录了数据从产生到消费的完整链路。它包含静态的表、列、分区信息(也就是MetaStore);动态的任务、表依赖映射关系;数据仓库的模型定义...
  • 数据仓库(五)元数据管理

    万次阅读 多人点赞 2018-09-20 21:47:03
    概述 元数据通常定义为”关于数据的...元数据贯穿了数据仓库的整个生命周期,使用元数据驱动数据仓库的开发,使数据仓库自动化,可视化。  元数据类型   1.业务元数据  业务元数据指从业务角度描述业务...
  • 元数据 & 数据元 释义

    千次阅读 2013-10-30 19:46:56
    参与建设《国家科技基础条件平台》中的一个项目,当拟定一种技术规范时,碰到了“元数据”“数据元”的相关概念,从别处引用如下描述: 一、元数据 通常,元数据被定义为“关于数据的数据”,但是该定义并不确切...
  • 数据治理系列2:元数据管理—企业数据治理的基础

    万次阅读 多人点赞 2019-05-13 20:11:04
    导读:元数据管理是对企业涉及的业务元数据、技术元数据、管理元数据进行盘点、集成和管理,按照科学、有效的机制对元数据进行管理,并面向开发人员、最终用户提供元数据服务,以满足用户的业务需求,对企业业务系统...
  • HDFS元数据

    千次阅读 2018-01-24 19:27:42
    从形式上讲,元数据可分为内存元数据元数据文件两种。其中NameNode在内存中维护整个文件系统的元数据镜像,用于HDFS的管理;元数据文件则用于持久化存储。 从类型上讲,元数据有三类重要信息: 第一...
  • 元数据分类

    千次阅读 2017-06-11 16:45:25
    1.业务元数据 主要包括业务术语、信息分类、指标定义、业务规则等。 2,技术元数据 数据结构、数据处理细节方面的技术化描述,主要包括源系统接口规范、数据仓库结构的描述(接口信息、表信息、程序信息等)以及经营...
  • 数据仓库系列--元数据

    千次阅读 2018-04-15 20:35:09
    一.元数据 一.元数据的定义 数据仓库的元数据是关于数据仓库... 元数据是数据仓库管理系统的重要组成部分,元数据管理器是企业级数据仓库中的关键组件,贯穿数据仓库构建的整个过程,直接影响着数据仓库的构...
  • NAMENODE工作机制学习目标:理解namenode的工作机制尤其是元数据管理机制,以增强对HDFS工作原理的理解,及培养hadoop集群运营中“性能调优”、“namenode”故障问题的分析解决能力 问题场景:1、集群启动后,可以...
  • 文档元数据

    千次阅读 2016-09-24 22:07:28
    元数据是描述数据的信息,元数据不会显示在页面上,但是对于机器是可读的。如果说一篇HTML文档包含数据以及描述数据元数据,那么元数据就是head元素里的元素,数据就是放在body元素里面的。 head里面包含的元数据...
  • 元数据与数据治理|学习汇总

    千次阅读 2019-01-08 15:23:02
    以下是学习元数据与 数据治理的整个过程:包含技术总结和心里变化情况   以日志的形式进行汇总 2019.1.4 (第一天:接触需求) 需求定义 第一天 讲解需求( 数据仓库、元数据处理建设) 内心变化  片面...
  • 元数据及数据仓库相关概念

    千次阅读 2018-09-28 11:48:53
    文章目录元数据(metadata)的概念Data about Data定义技术元数据业务元数据总结数据仓库ODS简单的理解为 Operational Data Store, 运营数据仓储 数据整合层(也叫做数据缓冲层)EDW简单理解为 Enterprise Data ...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 99,805
精华内容 39,922
关键字:

元数据