工作空间管理(公共云)与平台管理(专有云) - 大数据开发治理平台 DataWorks

。 在工作空间管理(公共 )与 平台管理(专有 )中,管理员可将相关用户加入到工作空间,并赋予DataWorks预设 项目管理员、开发、运维、部署、安全管理员 访客等角色,实现多角色协同开发。 ...

简单模式和标准模式的区别 - 大数据开发治理平台 DataWorks

为方便不同安全管控要求 用户生产 数据,DataWorks为您提供简单模式 标准模式两种工作空间模式。本文为您介绍两种模式工作空间 区别 ...

独享数据集成资源组的性能指标和计费标准 - 大数据开发治理平台 DataWorks

本文为您介绍独享 数据集成资源组 性能指标 计费标准 ...

独享数据服务资源组的性能指标和计费标准 - 大数据开发治理平台 DataWorks

本文为您介绍独享 数据服务资源组 性能指标 计费标准 ...

QuickBI中接入亚马逊云平台的MySQL数据库报"数据源连通性异常,请检查参数是否正确”

问题描述QuickBI中接入亚马逊 MySQL数据库报" 数据源连通性异常,请检查参数是否正确,错误信息:XXX:ECS only support IP address”.问题原因创建"自建 数据源"时 ...

Hive访问Delta Lake和Hudi数据 - 开源大数据平台E-MapReduce

Hive不支持写入 数据到Delta Lake Hudi,但是可以通过外部表 方式查询Delta Lake Hudi中 数据。本文通过 ...

新增和使用独享数据集成资源组 - 大数据开发治理平台 DataWorks

数据库有白名单访问限制,走公网,您需要添加独享 数据集成资源组 EIP地址,走内网,您需要添加独享 数据集成资源组绑定 交换机网段至数据库 白名单 安全组。详情请参见使用独享 数据集成资源组执行任务需要在数据库添加 IP白名单 ...

数据源开发和生产环境隔离 - 大数据开发治理平台 DataWorks

数据源隔离模式可以满足标准模式下,开发环境 生产环境 数据隔离需求。 背景信息 同一个名称 数据源存在开发环境 生产环境两套配置,您可以通过 数据源隔离使其在不同环境隔离使用 ...

自建Hadoop数据迁移到阿里云E-MapReduce - 开源大数据平台E-MapReduce

数据集中保存在HDFS文件系统用于 数据分析任务。客户在决定上 之后,会将自建Hadoop集群 数据迁移到阿里 自建Hadoop集群或者EMR集群。本实践方案提供安全 低成本 HDFS 数据迁移方案 ...

自建Hive数据仓库迁移到阿里云E-MapReduce - 开源大数据平台E-MapReduce

使用阿里 数据库RDS保存Hive 数据信息,可以提升 数据可靠性 服务可用性,免除客户运维自建MySQL数据库 工作 ...

Spark处理Delta Lake和Hudi数据 - 开源大数据平台E-MapReduce

Delta Lake Hudi是当前主流 数据湖产品,并且都支持了Spark 读写操作。本文为您介绍Spark如何处理Delta ...

建立设备与平台的连接 - 阿里云物联网平台

阿里 物联网 平台提供设备端SDK,设备使用SDK与 平台建立通信。本文使用 平台提供 样例程序data_model_basic_demo ...

TPCH和TPCDS - 开源大数据平台E-MapReduce

Zeppelin自带了TPCH TPCDS 教程Note,您无需任何配置就可以在E-MapReduce(简称EMR) 数据开发集群进行 ...

SQL代码编码原则和规范 - 大数据开发治理平台 DataWorks

本文为您介绍SQL编码 基本原则 详细 编码规范。 编码原则 ...

平台安全诊断 - 大数据开发治理平台 DataWorks

权限控制、开发模式等功能相关 安全能力,以及诊断相关安全问题 最佳实践,帮助您及时发现 安全隐患,在进行相关工作事务前快速建立基本 安全体系。 进入 平台安全诊断 ...

JindoFS介绍和使用 - 开源大数据平台E-MapReduce

JindoFS是基于阿里 对象存储OSS,为开源 数据生态构建 Hadoop文件系统(HCFS)。JindoFS提供兼容对象存储 纯 ...

资源规划和配置 - 大数据开发治理平台 DataWorks

使用DataWorks 数据服务功能调用 数据API时,API调用请求会占用一定 资源组,本文为您介绍资源组 基本概念 分类,以及连通性 ...

提交节点时提示:输入输出和代码血缘分析不匹配 - 大数据开发治理平台 DataWorks

表可以忽略提示直接提交。 由于DataWorks 调度依赖主要保障调度节点定时更新 数据,所以非DataWorks 平台上调度更新 表, 平台无法监控。当节点代码中SELECT非周期性调度生产 数据时,您需要 ...

Spark SQL、Dataset和DataFrame基础操作 - 开源大数据平台E-MapReduce

。 Spark SQL、Dataset DataFrame介绍 Spark SQL是一个用于结构化 数据处理 Spark模块,与基本 Spark RDD API不同,Spark ...

Spark Shell和RDD基础操作 - 开源大数据平台E-MapReduce

。Spark支持通过集合来创建RDD 通过外部 数据集构建RDD两种方式来创建RDD。例如,共享文件系统、HDFS、HBase或任何提供Hadoop InputFormat 数据集 ...

收集和查看元数据 - 大数据开发治理平台 DataWorks

。 前提条件 开始本实验前,请首先完成 数据加工中 操作 ...

我的数据 - 大数据开发治理平台 DataWorks

。 进入我 数据 登录DataWorks控制 。 在左侧 ...

使用MapReduce处理JindoFS上的数据 - 开源大数据平台E-MapReduce

处理上T级别 数据集。一个MapReduce作业通常会把输入 数据集切分为若干独立 数据块,由Map任务以完全并行 方式处理它们。框架会对map 输出先进行排序, 然后把结果输入给reduce任务。通常作业 输入 ...

使用Hive查询JindoFS上的数据 - 开源大数据平台E-MapReduce

undefinedDatabase、Table Partition 形式进行管理,通过指定位置(Location)对应到后端 数据。 JindoFS配置 以 ...

查询数据开发中可用的集群列表 - 开源大数据平台E-MapReduce

地域ID。您可以调用DescribeRegions查看最新 阿里 地域列表 ...

使用Flink处理JindoFS上的数据 - 开源大数据平台E-MapReduce

本文介绍如何使用Flink处理JindoFS上 数据 ...

元数据采集的数据源有白名单访问控制时需要配置的白名单 - 大数据开发治理平台 DataWorks

以阿里云云数据库RDS为例,您需要在元 数据采集时将相应 IP地址段添加到数据库白名单列表中,在配置白名单前您可以先了解以下问题。 目前 产品支持通用模式IP白名单 高安全模式IP白名单配置,您添加白名单时配置白名单 ...

服务状态接入云监控 - 开源大数据平台E-MapReduce

监控(CloudMonitor)是一项针对阿里 资源 互联网应用进行监控 服务。 监控服务可用于获取阿里 资源 监控指标、探测互联网 ...

数据质量:全流程的质量监控 - 大数据开发治理平台 DataWorks

DataWorks 全流程 数据质量监控功能为您提供35种预设表级别、字段级别 自定义 监控模板。 数据 ...

JindoTable SDK模式归档和解冻命令介绍 - 开源大数据平台E-MapReduce

。 新增 archiveTable unarchiveTable命令与原有archive unarchive命令 主要 区别为 ...

JindoTable SDK模式归档和解冻命令介绍 - 开源大数据平台E-MapReduce

。 待归档 数据必须是表 数据(可以是分区表或非分区表),且已经位于阿里 对象存储OSS ...

上传和引用认证文件 - 大数据开发治理平台 DataWorks

同时开启第三方认证功能,使得只有可信 应用 服务才能访问 数据资源。本文为您介绍如何上传 引用认证文件。 背景信息 ...

配置调度和依赖属性 - 大数据开发治理平台 DataWorks

write_result 调度周期为周调度为例,为您介绍如何设置DataWorks 调度属性 依赖属性。 前提条件 ...

创建和使用前置过滤器 - 大数据开发治理平台 DataWorks

。 登录DataWorks控制 。 在左侧导航栏,单击工作空间列表。 选择工作空间所在地域后,单击相应工作空间后 进入 数据服务 ...

ECS应用角色(EMR 3.32之后版本和EMR 4.5之后版本) - 开源大数据平台E-MapReduce

EMR集群中 每个ECS实例。在EMR集群之上运行 应用程序通过该角色来获得与其他 服务交互 权限,实现以免AccessKey 方式访问阿里 资源,避免了在配置文件中暴露AccessKey 风险 ...

继承和转换 - 大数据开发治理平台 DataWorks

DDM支持不同类型 数据模型转换,模型类型包括:Logical(default)、Hive(2.x)、MangoDB、Gbase ...

专有网络VPC的数据源连通独享数据集成资源组 - 大数据开发治理平台 DataWorks

本文以阿里 RDS数据库为例,为您介绍专有网络VPC 数据源如何连通独享 数据集成资源组 ...

支持的数据源 - 大数据开发治理平台 DataWorks

。 说明 每个 数据配置信息差距较 ,请根据自身需求,在 数据源配置 作业配置模块查询相应 参数配置信息 ...

使用E-MapReduce Hive关联云HBase - 开源大数据平台E-MapReduce

本文介绍如何使用E-MapReduce(简称EMR)上 Hive关联阿里 HBase 表。阿里 HBase需要借助外部Hive对多表 ...

<em>大数据</em>简介

<em>大数据</em>、<em>云</em>计算、物联网<em>区别和</em>联系: <em>云</em>计算 通过网络提供廉价的计算能力叫<em>云</em>计算。saas 软件既是服务 software as a service paas <em>平台</em>既是服务 platform as a service lass 基础设施即时服务 infrastructure as a ...

SinoBBD Cloud发布 一体化推动产业<em>云</em>发展

后台一体化的架构理念,在保证数据存储和访问安全的前提下,利用统一的云和<em>大数据平台</em>为各行业<em>云</em>用户提供大数据存储、备份、清洗、分析等服务和工具,为行业大数据的价值发现及数据运营和变现提供技术<em>平台和</em>专业服务...

构建物联网<em>云平台</em>“搞活”<em>数据</em>价值

因此,需要一家在物联网技术上有深厚功底,并在<em>大数据</em>分析<em>和</em>人工智能上有积累的<em>云平台</em>,才能满足生态链闭环的需求。2015年底,江波龙(longsys)与IBM签署<em>云平台</em>技术合作协议,江波龙科技将借助IBM SuperVessel<em>云</em>...

构建物联网<em>云平台</em>“搞活”<em>数据</em>价值

因此,需要一家在物联网技术上有深厚功底,并在<em>大数据</em>分析<em>和</em>人工智能上有积累的<em>云平台</em>,才能满足生态链闭环的需求。2015年底,江波龙(longsys)与IBM签署<em>云平台</em>技术合作协议,江波龙科技将借助IBM SuperVessel<em>云</em>...

关于行业<em>云</em>,你知道多少,怎么看?

行业云与公有云最大<em>的区别</em>在于公众云是可为公众所使用的<em>云平台</em>,一般为一个专门出售云服务的机构所拥有,例如谷歌、百度等,其特点是<em>数据</em>来源是公开途径,通过独有的应用为利用公开<em>数据</em>为客户提供服务,其算法、业务...

<em>云</em>计算固然好 但挑战依然存在

<em>大数据平台</em>越来越多地部署在云中,考虑到它们包含的数据量,这可能会带来一些管理上的挑战。这种数据的分散也导致了一些问题,例如在管理<em>和</em>使用云端数据方面。对于初学者来说,在云中如何妥善管理各种数据集的数据...

阿里<em>云</em>推出首个企业级<em>大数据平台</em>开发者版

3月20日,阿里<em>云</em>宣布推出企业级<em>大数据</em>计算<em>平台</em>MaxCompute开发者版。该版本基于MaxCompute原有的分布式架构,具备高可靠、企业级安全能力、全面融合开源等特点,可轻松做到开箱即用,分钟级拥有<em>大数据</em>开发项目,帮助...

<em>云数据</em>中心将替代IDC?先弄明白<em>区别</em>再说

相比单台实体服务器甚至单个IDC<em>数据</em>中心,<em>云数据</em>中心无论从交付/服务方式、资源分配规模、资源分配速度,还是整个<em>平台的</em>运行效率方面,均有不小的提升。此外,在选址规则方面,<em>云数据</em>中心也有很<em>大</em>的灵活性。长期来看...

谷歌<em>云平台</em>服务为何得到企业的关注

让我们来看一下Google公司2016年迄今为止取得的进展,包括其<em>云平台的</em>最新更新情况,以及2017年云计算管理员期望在清单中保留的项目。Google云平台服务<em>和</em>功能 Google云端平台由分布在全球五个区域的冗余<em>数据</em>中心运作...

一场变美盛宴后面的<em>大数据</em>故事

小红唇的团队在和数加<em>平台的</em>推荐引擎团队合作中快速的学习了<em>大数据和</em>推荐系统的相关知识,可以说是阿里<em>云</em>的推荐引擎为小红唇技术团队开启了<em>大数据</em>这扇神秘的大门。这个架构简单清晰,但也有着很多不完美的地方,特别...
< 1 2 3 4 ... 3993 >
跳转至: GO
新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折