安装HBase Java SDK
如果您的环境不支持安装阿里云发行的HBase客户端，或您经常通过Hive、Spark、开源Flink（非阿里云托管版）使用Lindorm宽表引擎，为避免配置更改出现错误，建议您使用开源HBase客户端连接并使用Lindorm宽表引擎。使用开源HBase客户端连接并...
开源版和商业版介绍
SOFABoot 目前对外开放的有开源版和商业版，本文介绍这两个版本的特点及适用场景，您可以根据自身需求自由选择合适的版本。选型指南 各个版本的能力和适用场景信息见下表：版本 能力 场景 文档 开源版本 具有模块化开发、类隔离、日志隔离...
EMR旧版数据开发迁移公告
Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。EMR Workflow...
快速使用EMR Notebook
EMR Notebook提供了全托管的兼容开源Jupyter的Notebook服务，同时内置了SQL Editor的功能。支持SparkSQL、Hive、StarRocks、PySpark等应用程序的开发和运行。本文以Hive查询为例，为您介绍如何使用EMR Notebook。前提条件 已完成系统角色...
管理用户
EMR用户可以用于访问链接与端口，查看开源组件Web UI时的用户身份认证，也可以在开启组件LDAP认证之后进行身份认证。如果将Ranger的用户源设置为LDAP，则可以对用户管理中的用户进行权限控制。如果是高安全集群，EMR用户可以用于Kinit操作...
Kerberos概述
高安全类型集群中的开源组件以Kerberos的安全模式启动，因此只有经过认证的客户端（Client）才能访问集群的服务（例如HDFS）。背景信息 集群开启Kerberos之后： 客户端：可以对可信任的客户端提供认证，使得可信任客户端能够正确提交作业，...
管理LDAP认证
如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的>enableLDAP。在弹出的对话框中，输入 执行原因，单击 确定。在 ...
OSS/OSS-HDFS概述
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括 JindoFS 存储系统（原JindoFS Block模式）...
EMR数据开发停止更新公告
Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。EMR Workflow...
EMR-3.24.x版本说明
支持其他开源已有特性。Grafana 新增组件（Flink独立集群），版本6.4.2。Prometheus 新增组件（Flink独立集群），版本2.13.0。AlertManager 新增组件（Flink独立集群），版本0.19.0。TensorFlow on spark 支持TensorFlow框架置于Spark之上...
Quick BI中嵌入ECHARTS之类的开源图表的方法
概述 本文介绍嵌入ECHARTS之类的开源图表的方法。详细信息 可以通过内嵌页面将ECHARTS图表嵌入Quick BI中。1.创建仪表板，新建“内嵌页面”。2.内嵌页面的链接填写ECHARTS的URL。适用于 Quick&BI
EMR元数据迁移公告
Metastore，无缝对接EMR上开源计算引擎，并支持多版本管理和Data Profile功能。另外，DLF还支持数据探索、湖管理和数据权限控制等功能，并与阿里云其他计算产品（例如MaxCompute、Databricks和Hologres等）无缝对接，可以扩展更丰富的计算...
如何监控开源Apache Kafka？
本文为您介绍监控开源Apache Kafka的解决方案。如果您需要监控开源Apache Kafka，请参见以下解决方案：Monitoring Kafka Monitoring Kafka performance metrics
JindoFS块存储模式
表示当前JindoFS支持的命名空间，多个命名空间时以逗号隔开。test jfs.namespaces.test.uri 表示test命名空间的后端存储。oss:/oss-bucket/oss-dir 说明 该配置也可以配置到OSS bucket下的具体目录，该命名空间即以该目录作为根目录来读写...
如何解决MSE Nacos开源控制台鉴权不生效问题
本文介绍如何解决MSE Nacos开源控制台鉴权不生效问题。问题现象 在Nacos的开源控制台中创建了新用户，并为该用户设置了某个命名空间权限，但没有生效（仍然可以访问其他命名空间）。已修改用户密码，且已删除用户，但是程序仍然可以使用旧...
快速使用EMR Workflow
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。本文以...
开源软件迁移
当前大部分应用系统都基于开源软件构建，并且大部分的开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。本文介绍Nginx、MySQL、Redis、TensorFlow PyTorch等开源软件如何在倚天云服务...
JindoFS实战演示
Flume是一个分布式、可靠、高可用的系统，支持从不同数据源高效地收集、聚合、迁移大量日志数据，聚合到中心化的数据存储服务，被广泛用于日志收集场景中。由于OSS本身不支持Flush功能，而Flume通过调用 flush()能够保证事务性写入。Flume...
卸载阿里云Prometheus和开源Prometheus
本文介绍如何卸载 阿里云Prometheus 和开源Prometheus。操作步骤 您可以通过控制台卸载 阿里云Prometheus 和开源Prometheus，卸载后不会有数据残留。卸载 阿里云Prometheus 和开源Prometheus的操作类似，以下以卸载 阿里云Prometheus 为例...
迁移方案
对于DataStream作业来说，开源Flink和VVR的state是完全兼容的，但是对于SQL作业来说，VVR相比社区Flink，做了大量的优化工作，不能保证state完全兼容。对于state不能兼容的作业，无法从开源Flink生成的Checkpoint中恢复。对于这部分作业，...
实例支持哪些开源版本？
云消息队列 Kafka 版 支持的开源服务器版本及客户端版本。云消息队列 Kafka 版 标准版与专业版实例支持的开源版本是0.10.2、2.2.0、2.6.2版本，同时兼容对应的0.10.x、2.2.x、2.6.x的客户端。建议您使用2.2.0及以上的版本。如需升级版本，...
通过开源Sentinel SDK接入
通过开源组件Sentinel，可以便捷地接入AHAS应用防护。操作步骤 使用开源组件Sentinel将应用接入AHAS应用防护以及连接控制台的具体操作，请参见 新手指南。若您已接入Sentinel控制台，您可以将Pom包中的 sentinel-transport-simple-http ...
登录集群
在本地计算机的终端与集群主节点创建SSH连接之后，您可以通过Linux命令监控集群并与集群交互，也可以在SSH连接中创建隧道以查看开源组件的Web页面，详情请参见 通过SSH隧道方式访问开源组件Web UI。获取主节点公网IP地址 进入详情页面。...
通过客户端方式连接StarRocks实例
使用开源MySQL客户端连接StarRocks 步骤一：下载MySQL客户端并安装数据库 下载 MySQL客户端。执行以下命令，解压缩安装包。tar zxvf mysql-5.6.40-linux-glibc2.12-i686.tar.gz 执行以下命令，复制解压后的mysql目录到系统的本地软件目录。...
EMR-5.2.x版本说明
Optimization）、DPP（DynamicPartitionPruning）以及Z-Order等功能，性能比开源Spark 3版本提升50%。支持阿里云Log Service、DataHub和消息队列RocketMQ版（简称ONS）等数据源。Tez 优化Tez默认参数，以提升作业性能。Ranger 修复Ranger...
MSHA产品和开源产品对比
路由ID维度：切换数据源和延迟禁写，包括：PolarDB DRDS ✅ ❌ 通用能力 组件 功能大类 具体功能说明 商业产品 开源产品 网关 路由 条件路由（入口流量调度）✅ ❌ 注册中心同步 服务发现 跨集群的服务同步 ✅ ❌ 切流模块 命令通道 控制面...
生命周期策略
本文为您介绍开源大数据开发平台E-MapReduce（简称EMR) 的产品生命周期策略及产品终止策略（包含产品粒度与发行版本粒度），以便您知晓详细规则，提早做好相应准备。背景信息 产品的更新换代是基础技术软件领域的常态。在开源大数据社区...
EMR数据开发（旧版）停止全面支持公告
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。EMR ...
如何导出全部Vhost或者指定Vhost元数据
在导出开源RabbitMQ集群元数据时，开源RabbitMQ支持导出全部Vhost或某个指定的Vhost元数据。本文介绍如何通过开源RabbitMQ控制台和HTTP API导出全部Vhost或者指定Vhost元数据。前提条件 开启RabbitMQ管理插件。开源RabbitMQ控制台导出 在...
合作伙伴及开源生态
技术合作伙伴 开源技术社区 开源项目布局 2018 年 4 月，蚂蚁集团宣布开源 SOFAStack 金融级分布式架构。得益于社区的信任和支持，目前已经累积超过 2.5 万的 Star 数和超过 100 家企业用户，并持续朝打造金融级云原生多个技术领域的标杆...
通过开源Kafka脚本工具连接Lindorm流引擎
Lindorm流引擎完全兼容开源Kafka API，您可以通过Kafka脚本工具连接Lindorm流引擎，本文介绍如何通过开源Kafka脚本工具连接Lindorm流引擎。前提条件 已安装Java环境，要求安装JDK 1.7及以上版本。已将脚本部署实例IP地址添加至Lindorm实例...
性能测试
本文介绍Ganos时空服务与开源GeoMesa（HBase）、云数据库MongoDB分片集群在处理时空轨迹数据时的性能测试对比。测试环境 本次性能测试中需要准备以下测试数据库，具体配置如下表：数据库 配置说明 云原生多模数据库 Lindorm Ganos引擎（即...
产品优势
特性对比 Lindorm VS 开 源HBase VS 开源Cassandra Lindorm宽表引擎是面向海量半结构化、结构化数据设计的分布式存储，兼容HBase、Phoenix(SQL)、Cassandra等开源标准接口，下表介绍Lindorm与开源HBase和开源Cassandra的区别。特性 云原生...
生命周期策略
本文为您介绍开源大数据开发平台E-MapReduce（简称EMR) 的产品生命周期策略及产品终止策略（包含产品粒度与发行版本粒度），以便您知晓详细规则，提早做好相应准备。背景信息 产品的更新换代是基础技术软件领域的常态。在开源大数据社区...
与开源PostgreSQL性能对比
简介 相较于开源PostgreSQL 14，PolarDB for PostgreSQL 14在以下几方面进行了优化，提升了整体性能： 采用了领先硬件技术，包括使用3DXpoint存储介质的Optane存储卡、NVMeSSD和RoCE RDMA网络等。基于新的硬件，实现了一整套在用户态运行的...
SmartData 3.1.x版本简介
支持文件的checksum功能，对齐开源HDFS checksum相关接口，支持MD5MD5CRC和COMPOSITE_CRC两种算法；并且针对MD5MD5CRC算法实现了可传入block size的扩展接口以及支持相应的Shell命令，从而能够更好地支持和HDFS文件的比对。文件透明压缩...
迁移场景
开源软件：开源软件指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。当前大部分开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。更多信息，请...
概述
Spark是MaxCompute提供的兼容开源Spark的计算服务。它在统一的计算资源和数据集权限体系之上，提供Spark计算框架，支持您以熟悉的开发使用方式提交运行Spark作业，满足更丰富的数据处理分析需求。使用限制 MaxCompute Spark支持如下场景：...
如何计算应用监控与其他开源监控成本？
本文将在ARMS应用监控中使用资源包的成本分别与按量付费费用、某常见APM产品年付费用、自行搭建开源Skywalking监控方案的物理资源成本进行了对比，结果表明在ARMS应用监控中使用资源包能够显著降低成本。表 1.价格对比（单位：人民币）监控...
- 产品推荐
- 这些文档可能帮助您