Spark/Hive/HDFS使用JindoSDK访问OSS-HDFS服务

步骤二:查看HDFS服务域名(endpoint)在OSS管理控制台的 概览 页面,可以查看HDFS服务的域名 步骤三:在CDP集群中使用OSS-HDFS 登录CDP集群服务器 下载并解压JindoSDK JAR包。执行以下命令,下载4.5.0版本JindoSDK JAR包。wget ...

CDP存量集群启动Kerberos

本章节将为您介绍如何在CDP集群...BDPHTSEC.COM = { kdc = cdp-utility-1.c-a4542b55a0e64699.cn-hangzhou.cdp.aliyuncs.com admin_server =cdp-utility-1.c-a4542b55a0e64699.cn-hangzhou.cdp.aliyuncs.com }[domain_realm].c-a4542b55a0e64699....

CDP使用指南-Cloudera版

CDP使用指南-Cloudera版

CDP使用常见问题

打开阿里云管控列表,点击集群名称进入集群详情页面,点击顶部 主机列表,找到cdp-utility-1节点。通过SSH访问集群节点需要先配置ECS安全组白名单,点击主机列表ECS ID链接跳转到ECS控制台,添加22端口入口规则。如果已经打通隧道,请使用...

什么是阿里云Cloudera CDP

企业数据云平台Cloudera Data Platform(简称阿里云CDP),是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品,是阿里云和Cloudera联合打造阿里云上的大...

视频专区

1、CDP 产品介绍 https://developer.aliyun.com/live/247867 2、CDH/HDP 何去何从?https://developer.aliyun.com/live/247950 3、CDP 集群管理 https://developer.aliyun.com/live/248032 4、如何访问CDP集群?...

续费

本章节将为您介绍什么是CDP续费、续费的具体操作流程。CDP续费简介 CDP集群续费费用包含ECS硬件费用和云市场软件订单费用。CDP集群支持用户按照购买的订单组进行分组续费(如初始实例组,扩容实例组1,扩容实例组2等)。续费操作步骤 登录 ...

基于阿里云部署的CDP白皮书

基于阿里云部署的CDP白皮书.pdf

缩容

本章节将为您介绍什么是CDP缩容、缩容的具体操作流程。CDP缩容简介 当CDP集群计算资源或存储资源过多时,您可以对集群进行水平收缩。目前支持收缩Core组类型节点。CDP集群缩容退还费用包含ECS硬件费用和云市场软件订单费用。CDP集群缩容...

常见问题

集群管理常见问题 CDP使用常见问题

产品架构

本章节将为您介绍CDP产品架构。CDP平台功能地图

CDP专业版集群扩容流程

由于CDP专业版集群使用FreeIPA进行安全认证和用户管理,所以在扩容后也需要进行一系列的操作才能加入到集群中。本文介绍了CDP专业版集群如何将扩容产生的机器添加到集群中,并为扩容节点赋予相应的角色,为集群提供计算服务。前置条件 已在...

自建CDH到阿里云CDP迁移最佳实践

CDH迁移升级CDP最佳实践.pdf

退订

本章节将为您介绍什么是CDP退订、退订的具体操作流程。CDP退订简介 CDP集群退订费用包含ECS硬件费用和云市场软件订单费用。退订操作步骤 重要 退订后,线上集群的数据及计算任务将被删除无法继续使用。因此在退订前,请确保您在线上集群的...

CDP集群组件版本

本章节将为您介绍阿里云CDP集群的组件版本。阿里云 CDP 默认创建的集群中只包含了下面列表中红色标识的组件,其他组件可以在集群创建完成后,通过 Cloudera Manager 根据需求定制安装。更完整的组件列表介绍请参见 CDP 7.1.7 Runtime ...

CDP基础版集群扩容流程

本章节将为您介绍什么是CDP扩容、扩容的具体操作流程。CDP扩容简介 当CDP集群计算资源或存储资源不足时,您可以对集群进行水平扩展。目前支持扩展Core组类型节点,并且新扩展节点的配置默认与组内已有节点一致。CDP集群扩容费用包含ECS硬件...

应用场景

本章节将为您介绍CDP产品的应用场景。现代数据仓库 运营数据库 准实时分析 流式处理和分析

Data Engineering的创建与使用

进入节点cdp-ds-1-1的集群初始化脚本cdp-cde-util.sh所在目录,执行命令:./cdp-cde-utils.sh init-virtual-cluster-h<域名>-a,命令中的域名需要替换为上一步获取到的域名,比如,针对上一步骤获取到的域名,初始化命令如下:./cdp-cde-...

快速入门

操作流程 创建集群 访问CDP Cloudera Manager管控 创建集群 进入阿里云CDP控制台。在 概览 页面,点击右上角 购买CDP产品。在CDP产品购买页面,完成集群相关配置。软件配置 配置项 说明 地域 在选择的对应地域内创建集群,一旦创建不能修改...

功能发布记录

本文为您介绍CDP产品功能及帮助文档的更新动态。2022年6月更新 时间 描述 2022.06.13 支持一键下单。支持用户在新购集群时自定义配置硬件。2022年4月更新 时间 描述 2022.04.22 新增视频专区。

产品优势

本章节将为您介绍CDP产品优势。提高开源组织版本管理效率,快速支持业务创新 更多开源软件支持 更高软件版本支持 覆盖从边缘到AI全场景 企业级的服务支持,降低运维成本,缩短故障处理时间 来自阿里云和Cloudera的7*24小时大数据专家服务...

产品公测

阿里云CDP产品目前处于公测期,公测期间您可以对CDP进行一个月的免费测试和使用,对您使用的场景进行验证。您可以根据下面步骤进行公测申请。说明 当前阿里云Cloudera企业云平台产品在公测试用期,试用期间您可以选购Cloudera企业云平台...

选型配置说明

选择合适的集群规格是CDP产品使用的第一步,CDP的选型配置需要考虑的主要因素包括:使用场景,估算数据量,服务可靠性以及预算等。​ 基础版CDP集群有主节点(Master)、工具节点(Utility)和核心实例(Core)三种实例类型。专业版CDP集群...

CDP钉钉告警支持

本章节将为您介绍设置CDP钉钉告警的操作流程。CDP支持多种告警方式,默认支持邮件和SNMP告警,这两种告警模式的具体配置可以参考 CDP官网。除以上两种告警模式外,CDP还支持自定义告警脚本,当集群的健康状况触发告警阈值,就会调用用户...

为RAM账号授权

为确保RAM用户能正常使用CDP企业数据云控制台的功能,您需要使用云账号登录访问控制RAM(Resource Access Management),授予RAM用户相应的权限。背景信息 访问控制RAM是阿里云提供的资源访问控制服务,更多详情请参见 什么是访问控制。...

集群高可用

阿里云Cloudera CDP默认支持集群中组件HDFS NameNode、YARN ResourceManager以及Hive Metastore Server的高可用,此外对于Hive、Hue等组件用于存储元数据的元数据库MariaDB也做了主从备份,能最大限度保证服务的可用性和数据的可恢复性。...

RAM角色授权

如果您第一次进入CDP 管控台,首先进行RAM角色授权:说明 使用CDP企业数据云产品之前需要主账号或权限管理员创建如下服务关联角色 角色名称:AliyunServiceRoleForCDP 角色权限策略:AliyunServiceRolePolicyForCDP Cloudera企业数据云平台...

创建集群

创建集群 进入阿里云CDP控制台。在 概览 页面,点击右上角 购买CDP产品。在CDP产品购买页面,完成集群相关配置。软件配置 配置项 说明 地域 在选择的对应地域内创建集群,一旦创建不能修改。Kerberos身份认证 是否开启集群的Kerberos认证...

如何选择产品类型

阿里云CDP当前提供两个产品类型:基础版、专业版。不同的产品类型支持的功能范围不同。本文介绍设置与查看产品类型的途径以及基础版与专业版之间的差别。选择与查看产品类型 当您创建集群时,需要在 售卖页-软件配置 中选择您所需要的产品...

包年包月

本章节将介绍不同地域不同机型的Cloudera Data Platform(简称CDP)产品的包年包月费用。包年包月简介 购买CDP时的费用由两部分组成:硬件产品的费用和CDP软件产品的费用。其中硬件费用主要由ECS实例费用及块存储费用组成,CDP软件产品费用...

在FreeIPA中添加用户

专业版CDP使用FreeIPA部署Kerberos,LDAP等服务以提供安全、认证、用户管理等功能。本文为您介绍如何在FreeIPA中添加用户,并使用该用户登录Cloudera Manager和Data-Service的Management Console。前提条件 参见 通过SSH隧道访问Cloudera ...

实例类型

CDP由多个不同类型的实例节点组成,其中基础版包括主实例节点(Master)、工具实例节点(Utility)和核心实例节点(Core);专业版包括主实例节点(Master)、工具实例节点(Utility)、核心实例节点(Core)和数据服务节点(Data-Service...

初始化Kerberos环境

开始,在没有权限的情况下,执行一下命令[root@cdp-utility-1~]#hdfs dfs-ls/使用fayson用户运行MapReduce任务及操作Hive,需要在集群所有节点创建fayson用户.使用kadmin创建一个fayson的principal[root@cdp-utility-1 30-hdfs-JOURNALNODE...

Data Warehouse的创建

专业版CDP支持使用数据服务Data Warehouse,本文为您介绍如何在Data Warehouse服务中创建虚拟数仓,以管理、分析和操作Base集群中的数据。前提条件 由于Data Service集群的Management Console部署在内网中,因此需要通过SSH隧道访问。隧道...

Kerberos概述

重要 不但用户需要创建Kerberos principal,服务也需要,CDP会自动为集群中的服务都创建principal,而用户的principal就需要Kerberos管理员去创建了。Kerberos Keytabs Keytab 文件包含了principal 以及该principal 的加密密钥,通过该文件...

CDP集群高安全Kerberos+Ranger使用

[root@cdp-utility-1~]#hdfs dfs-ls/使用fayson用户运行MapReduce任务及操作Hive,需要在集群所有节点创建fayson用户。使用kadmin创建一个fayson的principal。[root@cdp-utility-1 30-hdfs-JOURNALNODE]#kadmin.local Authenticating as ...

Cloudera Manager公网访问添加安全组访问规则

添加安全组规则 登录CDP管控页面;选择对应的集群,点击 登录控制台;在安全组弹框中点击 配置安全组规则;选择进入安全组详情页面;输入对应的IP或IP段,点击 保存;回到管控界面,选择 完成安全组配置 点击 确认;输入用户名密码登录...

通过SSH隧道访问Cloudera Manager服务组件Web UI

比如:http://cdp-master-1.xxxx.cn-hangzhou.cdp.aliyuncs.com:9870/dfshealth.html#tab-overview方式2 配置代理扩展程序的方式 代理扩展程序可以帮助您更加轻松地在浏览器中管理和使用代理,确保网页浏览和集群Web UI访问互不干扰。安装...

DataWorks On CDP/CDH使用说明

DataWorks支持基于CDH(Cloudera's Distribution Including Apache Hadoop,以下简称CDH)和CDP(Cloudera Data Platform,以下简称CDP)集群创建Hive、MR、Presto和Impala等节点,实现CDP/CDH任务工作流的配置、定时调度和元数据管理等...

注册CDH或CDP集群至DataWorks

DataWorks提供了与CDH(Cloudera’s Distribution Including Apache Hadoop,以下简称CDH)和CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,您可在DataWorks中注册CDH及CDP集群,进行任务开发、调度、数据地图(元数据管理)...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
轻量应用服务器 云服务器 ECS 商标服务 阿里邮箱 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用