迁移场景
开源软件：开源软件指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。当前大部分开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。更多信息，请...
管理Hadoop回收站
开启回收站 如流程图所示，只需配置 fs.trash.interval 大于0，就会开启回收站，在 hdfs\oss\oss-hdfs\jfs 上执行 rm 时，都会放置到回收站目录中。关闭回收站 一旦关闭回收站后，执行 rm 便无法再次找回，通常不建议关闭，如果需要关闭...
管理Hadoop回收站
开启回收站 如流程图所示，只需配置 fs.trash.interval 大于0，就会开启回收站，在 hdfs\oss\oss-hdfs\jfs 上执行 rm 时，都会放置到回收站目录中。关闭回收站 一旦关闭回收站后，执行 rm 便无法再次找回，通常不建议关闭，如果需要关闭...
管理Hadoop回收站
开启回收站 如流程图所示，只需配置 fs.trash.interval 大于0，就会开启回收站，在 hdfs\oss\oss-hdfs\jfs 上执行 rm 时，都会放置到回收站目录中。关闭回收站 一旦关闭回收站后，执行 rm 便无法再次找回，通常不建议关闭，如果需要关闭...
Tez
Hive基于MapReduce提交任务和基于Tez提交任务流程图如下所示：Tez的详细信息，请参见 Apache TEZ。开启Tez引擎 Hive支持使用Tez引擎执行SQL任务，在执行任务前您可以按照如下操作手动开启Tez引擎。进入集群服务页面。登录 EMR on ECS。在...
OpenLDAP
Hive：使用LDAP认证 Spark：管理LDAP认证 Impala：管理LDAP认证 Trino：管理LDAP认证 Presto：管理LDAP认证 Kafka：使用LDAP用户鉴权 如果某个服务没有提供一键开启LDAP认证的功能，则需要参考开源软件的社区文档来配置开启LDAP认证。...
开源软件迁移
当前大部分应用系统都基于开源软件构建，并且大部分的开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。本文介绍Nginx、MySQL、Redis、TensorFlow、PyTorch等开源软件如何在倚天...
什么是图计算服务
图计算服务Graph Compute是阿里云自主研发的高性能分布式图计算产品，为开发者提供万亿级数据规模的一站式图技术服务。Graph Compute支持复杂图关系数据的存储、查询和计算，高效对接图算法与模型，在搜索推荐广告、实时风控、知识图谱、...
管理LDAP认证
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的 enableLDAP。...
E-MapReduce支持倚天云服务器
丰富的生态：倚天云服务器支持主流开源软件以及多款阿里云主流PaaS产品。最新网络架构：基于2*50 GB网络架构提供大带宽以及超强转发能力，对比上一代CIPU架构，网络带宽提升1倍。安全增强：支持vTPM特性，依托TPM/TCM芯片，实现从服务器到...
阿里云RPA软件用户协议
7.商业秘密，指一方的专有思想、可专利思想、现有或预期的产品和服务、软件、电路图、研发、工艺、方法、流程、配方、公式、算法、参数、数据、结构设计、原理图、为合作研发设计的模具、生产、成本、利润信息、金融和金融项目、顾客、客户...
迁移概述
其中，软件迁移支持迁移自研软件和开源软件：自研软件：指开发者开发的或者基于开源软件增强开发的软件。具体操作，请参见 源码迁移。开源软件：指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。更多...
数据迁移
基本流程示意图如下所示。操作步骤 执行以下命令，查看待迁移Kudu表的名称列表。Kudu table list {YourKuduMasterAddress} 说明 本文代码示例中的 {YourKuduMasterAddress} 为Kudu集群的Master节点内网IP地址，多个IP地址之间使用英文逗号...
产品架构
从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件也会相应的升级，详情请参见 版本概述 下各版本的版本说明。重要 已经创建好的EMR集群不支持组件升级。...
Alibaba Cloud Linux 3软件兼容性列表
软件类型 软件名称 软件版本 软件厂商 中间件 宝兰德应用服务器软件 V9.5 北京宝兰德软件股份有限公司 中间件 东方通应用服务器软件 V7.0 北京东方通科技股份有限公司 中间件 金蝶天燕Apusic应用服务器软件 V9.0 深圳市金蝶天燕云计算股份...
Doris
可以根据Runtime Statistics来动态调整执行计划，比如通过Runtime Filter技术能够在运行时生成Filter推到Probe侧，并且能够将Filter自动穿透到Probe侧最底层的Scan节点，从而大幅减少Probe的数据量，加速Join性能，流程图如下所示。...
Doris概述
可以根据Runtime Statistics来动态调整执行计划，比如通过Runtime Filter技术能够在运行时生成Filter推到Probe侧，并且能够将Filter自动穿透到Probe侧最底层的Scan节点，从而大幅减少Probe的数据量，加速Join性能，流程图如下所示。...
Trino
Trino（即原PrestoSQL）是一个开源的分布式SQL查询引擎，适用于交互式分析查询。EMR-3.44.0和EMR-5.10.0版本开始改用社区正式名称Trino，之前各版本控制台显示为Presto，其内核其实是Trino，使用时请注意区分。基本特性 Trino使用Java语言...
Trino概述
Trino（即原PrestoSQL）是一个开源的分布式SQL查询引擎，适用于交互式分析查询。EMR-3.44.0和EMR-5.10.0版本开始改用社区正式名称Trino，之前各版本控制台显示为Presto，内核其实是Trino，使用时请注意区分。基本特性 Trino使用Java语言...
Presto
系统组成 Presto的系统组成如下图所示。Presto是典型的M/S架构的系统，由一个Coordinator节点和多个Worker节点组成。Coordinator负责如下工作：接收用户查询请求，解析并生成执行计划，下发Worker节点执行。监控Worker节点运行状态，各个...
Presto概述
系统组成 Presto的系统组成如下图所示。Presto是典型的M/S架构的系统，由一个Coordinator节点和多个Worker节点组成。Coordinator负责如下工作：接收用户查询请求，解析并生成执行计划，下发Worker节点执行。监控Worker节点运行状态，各个...
Delta Lake概述
而Delta简化了工作流程，整条数据处理过程是一条完整的、可靠的实时流，其数据的清洗、转换、特征化等操作都是流上的节点动作，无需对历史和实时数据分别处理。与开源Delta Lake对比 EMR-Delta Lake丰富了开源Delta Lake的特性，例如对SQL...
DeltaLake
图 1.数据仓库与数据湖 Data Warehouse、Data Lake和Delta Lake对比如下所示。对比项 Data Warehouse Data Lake Delta Lake 架构 计算存储一体或分离 计算存储分离 计算存储分离 存储管理 严格、非通用 原生格式 通用格式、轻量级 场景 ...
扩容集群
EMR Serverless StarRocks不仅无缝兼容开源StarRocks，并且具备自动升级软件版本的功能，可省去手动管理版本的繁琐与风险。迁移方案详情，请参见 迁移StarRocks数据至EMR Serverless StarRocks。操作步骤 重要 集群扩容操作不会重启存量...
Kerberos
在这种高安全级别的集群中，所有开源组件均采用Kerberos安全模式启动，确保只有经过Kerberos认证的客户端能够访问集群提供的服务（例如HDFS）。背景信息 集群开启Kerberos之后：客户端：可以对可信任的客户端提供认证，使得可信任客户端...
入门概览
本文旨在介绍如何购买实例、创建账号、设置白名单、导入数据、连接实例和查询分析图，使您能够了解从购买图数据库GDB到开始使用的流程。前提条件 如果您是初次使用图数据库GDB，请先了解相关使用限制。具体信息，请参见 使用须知。如果您...
功能特性
EMR on ECS 功能集 功能 功能描述 参考文档 集群管理 创建集群 您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。创建集群 释放集群 在完成EMR集群任务后及时释放集群，可以释放资源...
Kerberos概述
在这种高安全级别的集群中，所有开源组件均采用Kerberos安全模式启动，确保只有经过Kerberos认证的客户端能够访问集群提供的服务（例如HDFS）。背景信息 集群开启Kerberos之后：客户端：可以对可信任的客户端提供认证，使得可信任客户端...
示例项目使用说明
集群运行 开源项目运行示例如下：Spark SparkWordCount：spark-submit-class SparkWordCount examples-1.0-SNAPSHOT-shaded.jar inputPath outputPath numPartition 参数说明如下：参数 描述 inputPath 输入数据路径。outputPath 输出路径...
OCR电商图片文字识别
1.组件介绍 说明 必要前置组件：无 建议后置组件：条件分支（可通过分支条件判断OCR能力是否调用成功并设计后续对应流程）利用本组件可以使用OCR技术识别电商商品宣传、社区贴吧、网络UGC等网络场景下图片（示例）。2.输入项 说明 请参照...
登录数据库
相关文档 您也可以通过其他客户端工具来登录图数据库GDB实例，更多方式如下：通过开源组件GDB Console可视化控制台登录图数据库，可视化界面，操作简单，并可根据业务需求对可视化界面进行二次开发。具体操作，请参见 通过开源组件GDB ...
EMR集群JindoData升级流程
操作流程 步骤一：准备软件包 登录EMR集群的Master节点，详情请参见 登录集群。将下载的patch包放在emr-user用户的HOME目录下，然后解压缩patch包。su-emr-user cd/home/emr-user/wget ...
什么是RPA
产品介绍 阿里云RPA产品是一款新型工作流程自动化办公机器人软件，通过模拟人工操作进行自动流程执行处理。它可以将办公人员从每日的重复工作中解放出来，提高生产效率。具体而言，阿里云RPA是基于软件机器人和 人工智能（AI，Artificial ...
控件截图（网页）
流程搭建示例 搭建流程 利用 打开新网页 组件，在Chrome浏览器中选中百度页面 利用 控件截图（网页）组件，截取百度一下控件元素图片 执行结果 如下图所示，该流程成功截取百度一下按钮图片，并将图片保存路径打印在日志面板中。
通过开源组件GDB Console登录图数据库
GDB Console是阿里云图数据库GDB自有开源组件，您可以根据自有业务需求对可视化界面进行二次开发。操作步骤 下载并安装GDB Console。下载Release版本，可以直接安装使用。更多信息，请参见 Release版本下载。说明 如果您使用的是ARM架构的...
条件循环
流程搭建示例 搭建流程 利用 设置变量值 组件，给变量a赋值初始值为1 利用 条件循环 组件，设置循环条件为a=5 利用 记录日志 组件，打印当前变量a的值 利用 设置变量值 组件，每循环一次变量a加1 执行结果 如下图所示，该流程根据条件循环...
获取计算机名
1.组件介绍 说明 必要前置组件：无 利用本...流程搭建示例 搭建流程 利用 获取计算机名 组件，获取计算机名 利用 记录日志 组件，打印指定变量的值 执行结果 如下图所示，该流程成功执行完后，会自动将获取到的计算机名称打印在日志面板中。
网页截图
流程搭建示例 搭建流程 利用 获取已打开网页 组件，在Chrome浏览器中选中百度页面 利用 页面截图 组件，设置保存路径 执行结果 如下图所示，该流程成功在Chrome浏览器中选中百度页面，并将百度页面截图保存到指定路径下。
获取机器人id
1.组件介绍 说明 必要前置组件：无 利用本组件...流程搭建示例 搭建流程 利用 获取机器人id 组件，获取机器人id的值 利用 记录日志 组件，打印指定变量的值 执行结果 如下图所示，该流程成功执行完后，会自动将机器人id的值打印在日志面板中。
设置变量值
1.组件介绍 说明 必要前置组件：无 利用本组件可以...流程搭建示例 搭建流程 利用设置变量值组件，设置指定变量的值 利用记录日志组件，打印指定变量的值 执行结果 如下图所示，该流程成功执行完后，会自动将指定的变量值打印在日志面板中。
- 产品推荐
- 这些文档可能帮助您