元数据
1
推荐
1414
浏览
元数据是什么？举例告诉你哪种方式更适合元数据的录入
元数据，一个简单的定义是描述数据的数据。在企业中，无论哪里有数据，都有相应的元数据。只有存在完整而准确的元数据，我们才能更好地理解数据并充分利用数据的价值。为了让大家更好地了解什么是元数据，TaskCtl...
ETL批量调度-Taskctl 发表了文章 • 2020-07-28 17:12
0
推荐
2307
浏览
还不理解元数据管理？看看这几个场景应用
数据即资产的概念已被大多数人所接受，有效的数据治理是形成优质数据资产的必要条件，而元数据管理又是数据治理的基础。那么，元数据管理具体有哪些应用呢？本篇文章我们将通过一些具体场景来科普一波。科普之前...
最年轻的学员 发表了文章 • 2019-04-04 15:08
0
投票
3
回答
3451
浏览
求问Metadata Driven ETL的发展以及现状
harrychinese 回复了问题 • 2016-09-24 21:42
0
投票
1
已解决
1707
浏览
有什么SQL解析的工具吗
天善小编 回复了问题 • 2016-04-12 12:17
0
投票
1
已解决
2755
浏览
血缘分析有什么好工具？
天善小编 回复了问题 • 2016-04-12 12:16
1
推荐
2923
浏览
0
投票
2
已解决
1398
浏览
目前有哪些元数据管理软件？
simon_cao 回复了问题 • 2016-04-12 10:25
6
推荐
4120
浏览
Datastage Metadata Repository的学习笔记《2》
1. Job 和 Stage 靠什么关联？SELECTA.*FROMXMETA.DATASTAGEX_XMETAGEN_DSSTAGEC2E76D84AS A, XMETA.DATASTAGEX_XMETAGEN_DSJOBDEFC2E76D84AS B WHEREA.NAME_XMETA = 'stage name' andB.NAME_XMETA = 'job n...
BAO胖子 发表了文章 • 2016-02-05 00:47
6
推荐
3596
浏览
0
投票
0
回答
1784
浏览
小白请教：有个报表，数据来源于多个数据库(hive，PG，oracle)。怎么实施好啊？难道要建3个元数据？
Sander 发起了问题 • 2015-11-17 09:59
0
投票
1
回答
2124
浏览
数据仓库元数据整理建议
BAO胖子 回复了问题 • 2015-11-03 23:27
0
投票
3
已解决
4840
浏览
IBM DATASTAGE如何快捷查找项目作业job中所使用的所有oracle表
小耳朵 回复了问题 • 2015-10-08 14:22
0
投票
1
已解决
2174
浏览
关于数据仓库中的元数据的问题
BAO胖子 回复了问题 • 2015-10-06 17:33
0
推荐
2739
浏览
SQLSERVER中的元数据锁
网上对于元数据锁的资料真的非常少元数据锁一般会出现在DDL语句里下面列出数据库引擎可以锁定的资源 锁住元数据的目的跟其他的锁是一样的，都是保证事务的一致性 实验环境：SQLSERVER2005 ，SQLSERVER2...
桦仔 发表了文章 • 2015-10-03 13:18
0
推荐
2852
浏览
【贝克汉姆教程】 2.3 检测和设计导入的元数据
2.3.检测和设计导入的元数据 关系型元数据导入之后，建模者需要对其进行检测和设置，检测内容主要涉及以下方面： ● 查询项的属性( the Usage property for query items) ●决定因素(determinant...
贝克汉姆 发表了文章 • 2015-09-27 15:17
技术型元数据管理软件本身的架构就是元模型。你把元模型理解成去装元数据内容的框架就可以了。
比如，关系型数据库中用于保存TABLE，COLUMN的系统表就是元模型。如果要做一个元数据管理软件，举一个最直接的例子，你要导入N种数据库的表结构信息，那么你就要需要... 显示全部 »
比如，关系型数据库中用于保存TABLE，COLUMN的系统表就是元模型。如果要做一个元数据管理软件，举一个最直接的例子，你要导入N种数据库的表结构信息，那么你就要需要... 显示全部 »
技术型元数据管理软件本身的架构就是元模型。你把元模型理解成去装元数据内容的框架就可以了。
比如，关系型数据库中用于保存TABLE，COLUMN的系统表就是元模型。如果要做一个元数据管理软件，举一个最直接的例子，你要导入N种数据库的表结构信息，那么你就要需要了解Oracle, Sybase, DB2等等等等所有数据的系统表内容。
除此之外，内容很多，要看你的元数据管理软件要做什么用。具体问题具体分析，这里没法写很详细，因为内容太多了
比如，关系型数据库中用于保存TABLE，COLUMN的系统表就是元模型。如果要做一个元数据管理软件，举一个最直接的例子，你要导入N种数据库的表结构信息，那么你就要需要了解Oracle, Sybase, DB2等等等等所有数据的系统表内容。
除此之外，内容很多，要看你的元数据管理软件要做什么用。具体问题具体分析，这里没法写很详细，因为内容太多了
好吧， 如果你有data mapping design文档，如果你用fastrack去管理mapping，多好。
一个不太聪明但也不是太笨的办法，把整个JOB导出成dsx（其实就是XML文件），然后查找From，Join之类的字样，一个个的记录下来吧，应该... 显示全部 »
一个不太聪明但也不是太笨的办法，把整个JOB导出成dsx（其实就是XML文件），然后查找From，Join之类的字样，一个个的记录下来吧，应该... 显示全部 »
好吧， 如果你有data mapping design文档，如果你用fastrack去管理mapping，多好。
一个不太聪明但也不是太笨的办法，把整个JOB导出成dsx（其实就是XML文件），然后查找From，Join之类的字样，一个个的记录下来吧，应该有些pattern可以让你加快速度查找的，或者写些正则表达式加快查找，总之比一个job，一个stage去打开快一些。
一个不太聪明但也不是太笨的办法，把整个JOB导出成dsx（其实就是XML文件），然后查找From，Join之类的字样，一个个的记录下来吧，应该有些pattern可以让你加快速度查找的，或者写些正则表达式加快查找，总之比一个job，一个stage去打开快一些。
Informatica PowerCenter metadata manager
Infosphere metadata workbench
普元MetaCube
Easytable
还有其他一些产品，以上仅供参考
Infosphere metadata workbench
普元MetaCube
Easytable
还有其他一些产品，以上仅供参考
Informatica PowerCenter metadata manager
Infosphere metadata workbench
普元MetaCube
Easytable
还有其他一些产品，以上仅供参考
Infosphere metadata workbench
普元MetaCube
Easytable
还有其他一些产品，以上仅供参考
春宇：data lineage分析难点在于对程序的解析，然后把解析后的结果结构化。
邱明伟：SQL能解析吗？
春宇：因为datastage, cognos都是IBM自己的产品，因此workbench通过这种办法去解析SQL，但复杂的SQL好像不太好用。
邱明伟... 显示全部 »
邱明伟：SQL能解析吗？
春宇：因为datastage, cognos都是IBM自己的产品，因此workbench通过这种办法去解析SQL，但复杂的SQL好像不太好用。
邱明伟... 显示全部 »
春宇：data lineage分析难点在于对程序的解析，然后把解析后的结果结构化。
邱明伟：SQL能解析吗？
春宇：因为datastage, cognos都是IBM自己的产品，因此workbench通过这种办法去解析SQL，但复杂的SQL好像不太好用。
邱明伟：恩，datastage我知道他有自己的元数据库。
春宇：另外的思路就是半自动化的处理，比如你建一套表，在系统上线的时候，无论ETL还是Report，都需要开发者提供mapping信息，作为系统工程的一部分，也有一些工具能够解析SQL，价格也不贵，datastage job都可以。但cognos有些复杂查询也搞不定，如果再跨一个cube就更难了，所以元数据管理是应该集成在系统工程中的。也就是说做开发设计的时候，版本更替的时候，就需要把元数据的变化check in到元数据库中。
邱明伟：SQL能解析吗？
春宇：因为datastage, cognos都是IBM自己的产品，因此workbench通过这种办法去解析SQL，但复杂的SQL好像不太好用。
邱明伟：恩，datastage我知道他有自己的元数据库。
春宇：另外的思路就是半自动化的处理，比如你建一套表，在系统上线的时候，无论ETL还是Report，都需要开发者提供mapping信息，作为系统工程的一部分，也有一些工具能够解析SQL，价格也不贵，datastage job都可以。但cognos有些复杂查询也搞不定，如果再跨一个cube就更难了，所以元数据管理是应该集成在系统工程中的。也就是说做开发设计的时候，版本更替的时候，就需要把元数据的变化check in到元数据库中。
内心召唤：@春宇 普元的工具据说可以，有接触吗？
邱明伟：不行的，他们是SQL要按照一定的规则来写才可以。
杨宝军：sql解析是补救方式，关键是开发工具本事带元数据管理功能
邱明伟：但是datastage好像不会保存历史数据哦，我们项目组是用datastage... 显示全部 »
邱明伟：不行的，他们是SQL要按照一定的规则来写才可以。
杨宝军：sql解析是补救方式，关键是开发工具本事带元数据管理功能
邱明伟：但是datastage好像不会保存历史数据哦，我们项目组是用datastage... 显示全部 »
内心召唤：@春宇 普元的工具据说可以，有接触吗？
邱明伟：不行的，他们是SQL要按照一定的规则来写才可以。
杨宝军：sql解析是补救方式，关键是开发工具本事带元数据管理功能
邱明伟：但是datastage好像不会保存历史数据哦，我们项目组是用datastage开发的，目前JOB解析这块已经基本搞定了, 现在就是SQL这块比较麻烦。
春宇：元数据管理需要另外开发额外的程序去配合使用，比如，用workbench其实你可能不爽。你可以直接读metadata repository。SQLparser，要花点钱，几百刀，java写的。
内心召唤：@邱明伟 informatica肯定有
邱明伟：SQLparser，这个是sql解析的工具啊
春宇：嗯
春宇：用过多with statement的解析比较麻烦
老头子：一般是解析xml，Datastage自己也可以解析xml，可以开发个作业自己解析自己的文件，然后提取出SQL来试试。
邱明伟：with结构的加上meterialize的hint，不要让他做视图展开。
邱明伟：不行的，他们是SQL要按照一定的规则来写才可以。
杨宝军：sql解析是补救方式，关键是开发工具本事带元数据管理功能
邱明伟：但是datastage好像不会保存历史数据哦，我们项目组是用datastage开发的，目前JOB解析这块已经基本搞定了, 现在就是SQL这块比较麻烦。
春宇：元数据管理需要另外开发额外的程序去配合使用，比如，用workbench其实你可能不爽。你可以直接读metadata repository。SQLparser，要花点钱，几百刀，java写的。
内心召唤：@邱明伟 informatica肯定有
邱明伟：SQLparser，这个是sql解析的工具啊
春宇：嗯
春宇：用过多with statement的解析比较麻烦
老头子：一般是解析xml，Datastage自己也可以解析xml，可以开发个作业自己解析自己的文件，然后提取出SQL来试试。
邱明伟：with结构的加上meterialize的hint，不要让他做视图展开。
0
投票
3
回答
3451
浏览
求问Metadata Driven ETL的发展以及现状
harrychinese 回复了问题 • 2016-09-24 21:42
0
投票
3
回答
3451
浏览
求问Metadata Driven ETL的发展以及现状
harrychinese 回复了问题 • 2016-09-24 21:42
0
投票
1
已解决
1707
浏览
有什么SQL解析的工具吗
天善小编 回复了问题 • 2016-04-12 12:17
0
投票
1
已解决
2755
浏览
血缘分析有什么好工具？
天善小编 回复了问题 • 2016-04-12 12:16
0
投票
2
已解决
1398
浏览
目前有哪些元数据管理软件？
simon_cao 回复了问题 • 2016-04-12 10:25
0
投票
0
回答
1784
浏览
小白请教：有个报表，数据来源于多个数据库(hive，PG，oracle)。怎么实施好啊？难道要建3个元数据？
Sander 发起了问题 • 2015-11-17 09:59
0
投票
1
回答
2124
浏览
数据仓库元数据整理建议
BAO胖子 回复了问题 • 2015-11-03 23:27
0
投票
3
已解决
4840
浏览
IBM DATASTAGE如何快捷查找项目作业job中所使用的所有oracle表
小耳朵 回复了问题 • 2015-10-08 14:22
0
投票
1
已解决
2174
浏览
关于数据仓库中的元数据的问题
BAO胖子 回复了问题 • 2015-10-06 17:33
0
投票
1
回答
3407
浏览
神马是元数据，业务元数据和技术元数据又是神马？
黄金阳 回复了问题 • 2014-11-15 17:53
0
投票
1
回答
4722
浏览
什么是元数据？怎么理解元数据？
andrea_zhou 回复了问题 • 2013-06-26 15:52
1
推荐
1414
浏览
元数据是什么？举例告诉你哪种方式更适合元数据的录入
元数据，一个简单的定义是描述数据的数据。在企业中，无论哪里有数据，都有相应的元数据。只有存在完整而准确的元数据，我们才能更好地理解数据并充分利用数据的价值。为了让大家更好地了解什么是元数据，TaskCtl...
ETL批量调度-Taskctl 发表了文章 • 2020-07-28 17:12
0
推荐
2307
浏览
还不理解元数据管理？看看这几个场景应用
数据即资产的概念已被大多数人所接受，有效的数据治理是形成优质数据资产的必要条件，而元数据管理又是数据治理的基础。那么，元数据管理具体有哪些应用呢？本篇文章我们将通过一些具体场景来科普一波。科普之前...
最年轻的学员 发表了文章 • 2019-04-04 15:08
1
推荐
2923
浏览
6
推荐
4120
浏览
Datastage Metadata Repository的学习笔记《2》
1. Job 和 Stage 靠什么关联？SELECTA.*FROMXMETA.DATASTAGEX_XMETAGEN_DSSTAGEC2E76D84AS A, XMETA.DATASTAGEX_XMETAGEN_DSJOBDEFC2E76D84AS B WHEREA.NAME_XMETA = 'stage name' andB.NAME_XMETA = 'job n...
BAO胖子 发表了文章 • 2016-02-05 00:47
6
推荐
3596
浏览
0
推荐
2739
浏览
SQLSERVER中的元数据锁
网上对于元数据锁的资料真的非常少元数据锁一般会出现在DDL语句里下面列出数据库引擎可以锁定的资源 锁住元数据的目的跟其他的锁是一样的，都是保证事务的一致性 实验环境：SQLSERVER2005 ，SQLSERVER2...
桦仔 发表了文章 • 2015-10-03 13:18
0
推荐
2852
浏览
【贝克汉姆教程】 2.3 检测和设计导入的元数据
2.3.检测和设计导入的元数据 关系型元数据导入之后，建模者需要对其进行检测和设置，检测内容主要涉及以下方面： ● 查询项的属性( the Usage property for query items) ●决定因素(determinant...
贝克汉姆 发表了文章 • 2015-09-27 15:17
7
推荐
11943
浏览
盲人摸象 - 数据架构学习笔记 之 元数据管理
概述#多图慎入元数据管理是我最爱谈及的话题之一，因为本人商业智能相关的绝世武功一直都没学好，而绝世武功的目录一直都背的不错。而元数据，真的很像绝世武功的目录。不知道谁定义的元数据，和数据仓库商业智能...
BAO胖子 发表了文章 • 2015-09-25 21:29
