《BI那点儿事》数据流转换——模糊分组转换
原文:《BI那点儿事》数据流转换——模糊分组转换 在模糊查找中我们提到脏数据是怎样进入到表中的事情，主要还是由于一些“Lazy-add”造成的。这种情况我们的肉眼很容易被欺骗，看上去是同一个单词，其实就差那么一个字母，变成了两个不同的单词。一个简单的例子是X-Ray Tech和xRey，我们很有可能认为他们是同一个职务，CT操作员，但是如果让计算机来处理的话，它们是两种截然不同的东西。和模糊查找....
《BI那点儿事》数据流转换——OLE DB 命令转换
原文:《BI那点儿事》数据流转换——OLE DB 命令转换 OLE DB命令对数据流中的数据行执行一个OLE DB命令。它针对数据表中的每一行进行更新操作，可以事先将要更新的数据存放在表中。或者针对一个有输入参数的存储过程，可以将这些参数存放在一个数据表中，不用每次都输入参数。示例数据准备： CREATE TABLE SourceParametersForStoredProc ( Param...
《BI那点儿事》数据流转换——查找转换
原文:《BI那点儿事》数据流转换——查找转换 查找转换通过联接输入列中的数据和引用数据集中的列来执行查找。是完全匹配查找。在源表中查找与字表能关联的所有源表记录。准备数据。源表 T_QualMoisture_Middle_Detail字典表 T_DIC_QualProcess数据流任务设计图： 设计步骤：
《BI那点儿事》数据流转换——模糊查找转换
原文:《BI那点儿事》数据流转换——模糊查找转换 BI项目中经常会有一些提取，转换，数据处理（ELT）的工作，其中最主要的是处理过赃数据。假设在项目中我们向数据库中注入了测试数据，但是通过一个外键从另外一个表中载入数据的时候没有对应的数据，那么这一行就是赃数据。这时候可以使用SQL中的Sound-Ex，full-text，相似度算法等方法查找。这种策略需要花费大量的时间和精力来设计算法，测试，维....
《BI那点儿事》数据流转换——多播、Union All、合并、合并联接
原文:《BI那点儿事》数据流转换——多播、Union All、合并、合并联接 建立测试数据： CREATE TABLE FactResults ( Name VARCHAR(50) , Course VARCHAR(50) , Score INT ) INSERT INTO FactResults ( Name , ...
《BI那点儿事》数据流转换——导入列、导出列
原文:《BI那点儿事》数据流转换——导入列、导出列 导入列： 导入列例子现在来做一个例子：创建路径D:\Pictures随便在路径D:\Pictures中粘贴4个比较小的图像文件命名为01.png、02.png、03.png、04.png在路径D:\Pictures内创建一个txt文件命名为filelist.txt，文件内容如下D:\Pictures\01.pngD:\Pictures\02.p....
《BI那点儿事》数据流转换——字词查找转换
原文:《BI那点儿事》数据流转换——字词查找转换 字词查找转换将从转换输入列的文本中提取的字词与引用表中的字词进行匹配，然后计算出查找表中的字词在输入数据集中出现的次数，并将计数与引用表中的此字词一并写入转换输出的列中。此转换对于创建基于输入文本并带有词频统计信息的自定义词列表很有用。 本章功能：取出一个表中某字段的数据，并取出另一个表中的关键词，判断关键词在源记录中出现的次数。创建模拟数据： ....
《BI那点儿事》数据流转换——透视
原文:《BI那点儿事》数据流转换——透视 这个和T-SQL中的PIVOT和UNPIVOT的作用是一样的。数据透视转换可以将数据规范或使它在报表中更具可读性。 通过透视列值的输入数据，透视转换将规范的数据集转变成规范程度稍低、但更为简洁的版本。例如，在列有客户名称、产品和购买数量的规范的 Orders 数据集中，任何购买多种产品的客户都有多行，每一行显示一种产品的详细订购信息。此时，如果对产品列透....
《BI那点儿事》数据流转换——逆透视转换
原文:《BI那点儿事》数据流转换——逆透视转换 逆透视转换将来自单个记录中多个列的值扩展为单个列中具有同样值的多个记录，使得非规范的数据集成为较规范的版本。例如，每个客户在列出客户名的数据集中各占一行，在该行的各列中显示购买的产品和数量。逆透视转换将数据集规范之后，客户购买的每种产品在该数据集中各占一行。 我们下一步是进行逆透视。与透视配置不同，逆透视配置相对简单。 你将需要选择透视字....
《BI那点儿事》数据流转换——百分比抽样、行抽样
原文:《BI那点儿事》数据流转换——百分比抽样、行抽样 百分比抽样和行抽样可以从数据源中随机选择一组数据。这两种task都可以产生两组输出，一组是随机选择的，另一组是没有被选择的。可以将这些选择出的数据发送到开发或者测试服务器上。这个Task的最合适的应用是建立数据挖掘模型然后，使用这些抽样数据来验证这个模型。 编辑这种task，选择要抽取的行数或者 百分比，如图。百分比抽样按百分比从数据源中随....
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
Quick BI 智能商业分析
中国唯一且连续6年入选 Gartner ABI 魔力象限的BI产品。沉淀阿里巴巴十余年数据分析经验，通过智能的数据分析和可视化能力帮助企业快速构建数据分析平台和决策支持系统。
+关注