在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS ...查看安装的Presto中的presto-hadoop-apache2版本。以0.265.1版本为例，通过 源码POM文件 可以看到引入的hadoop-apache2版本为2.7.4-9。下载presto-hadoop-apache2 对应版本的源码。git clone-b 2.7.4-9 ...
安装CPP动态库
在使用社区版C++ SDK接入阿里云 云消息队列 RocketMQ 版 来收发消息前，您需按本文提供的操作步骤安装CPP动态库。前提条件 在开始做准备工作前，请确保您的操作系统满足以下条件：Linux：CentOS 6.8、CentOS 7.2、RHEL 6.x、RHEL 7.x ...
附录二：第三方软件问题与说明
阿里云将尽最大努力为客户提供以下第三方软件在阿里云ECS服务器/操作系统环境中安装、配置和疑难排解的建议，确保其在阿里云ECS服务器/操作系统环境中正常运行。阿里云售后团队向客户提供的关于第三方软件的建议只适用于有经验的系统管理员...
Low Level REST Client(5.x)
安装方法请参见 安装JDK。创建阿里云Elasticsearch实例，版本为5.5.3。创建方法请参见 创建阿里云Elasticsearch实例。开启阿里云Elasticsearch实例的自动创建索引功能。具体操作步骤请参见 配置YML参数。如果未开启会提示如下报错。配置...
使用Hive访问
在计算节点上安装JDK，版本不能低于1.8。下载Apache Derby，下载地址为 官网地址，本文中使用的Apache Derby 版本为10.13.1.1。下载Hive压缩包，下载地址为 官网地址 本文中使用的Apache Hive版本为2.3.7。配置 Apache Derby 解压Hive压缩...
安装CPP动态库
使用C++ SDK接入阿里云 云消息队列 RocketMQ 版 收发消息前，您需按本文提供的操作步骤安装CPP动态库。重要 推荐您使用最新的RocketMQ 5.x系列SDK，5.x系列SDK作为主力研发版本，和 云消息队列 RocketMQ 版 5.x服务端完全兼容，提供了更...
自定义Source
本地安装了文件传输工具（SSH Secure File Transfer Client）。操作步骤 创建自定义Source。添加pom依赖。org.apache.flume flume-ng-core 1.9.0 说明 1.9.0 为Flume的版本信息，需要根据您Flume的版本信息进行替换。编写自定义的Source类...
Dataphin计算源为CDH,代码任务运行报错“java.lang....
完整的异常信息如下：2022-03-24 16:05:08.652 Task failed: java.sql.SQLException:Error while compiling statement:FAILED:Execution Error,return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask.Vertex failed,vertexName=...
在文件存储 HDFS 版上使用Apache HBase
本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。已部署...
在文件存储 HDFS 版上使用Apache Tez
本文主要介绍在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Tez。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
Connector安装及使用
阿里云流数据服务6.x版本安装Connectors请联系我们进行后台安装或升级至7.x及以上版本。目前标准版不支持Connectors自定义安装，专业版支持OpenSourceConnectors安装，企业版支持OpenSourceConnectors，Commercial Connectors和Premium ...
SSL接入点PLAIN机制收发消息
步骤三：创建资源 安装1.8或以上版本JDK 安装2.5或以上版本Maven 安装Java依赖库 在 pom.xml 中添加以下依赖。org.apache.kafka kafka-clients 2.4.0 org.slf4j slf4j-log4j12 1.7.6 说明 建议您保持服务端和客户端版本一致，即保持客户端...
使用Apache配置模式采集日志
Apache日志是运维网站的重要信息，日志服务支持通过Apache配置模式快速采集Apache日志并进行多维度分析。本文介绍如何通过日志服务控制台创建Apache配置模式的Logtail配置采集日志。前提条件 已创建Project和Logstore。更多信息，请参见 ...
数据服务集群
DataServing是阿里云E-MapReduce提供的基于Apache HBase的数据服务集群类型。本文为您介绍数据服务集群支持的特性，适用场景以及技术架构。特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。...
安装Docker并使用（Linux）
如果您需要在云服务ECS上安装Docker，可使用阿里云提供的Docker镜像源快速部署。本文主要介绍如何基于Alibaba Cloud Linux和CentOS镜像安装Docker、使用Docker制作镜像和部署docker-compose，以便更高效地构建、部署和管理应用程序。准备...
Linux系统中如何查看LANMP的编译参数
执行以下命令查看Apache的编译参数。cat/usr/local/apache2/build/config.nice 进入php的安装目录，一般默认为 usr/local/php/bin ，执行以下命令查看PHP的编译参数。php -i |grep configure 说明：如果执行该命令没有任何输出，则可能是...
接入方式
本文介绍Linkedmall分销消息在多种SDK下的接入方式 JAVA SDK 环境准备 安装1.8或以上版本JDK。具体操作。请参见 安装JDK。安装2.5或以上版本Maven。具体操作，请参见 安装Maven。安装编译工具。安装依赖库 在pom.xml中添加如下依赖 org....
步骤三：调用SDK收发消息
前提条件 步骤二：创建资源 安装IDEA 您可以使用IntelliJ IDEA或者Eclipse，本文以IntelliJ IDEA Ultimate为例。安装1.8或以上版本JDK 安装2.5或以上版本Maven 安装Java依赖库 在IDEA中创建一个Java工程。在 pom.xml 文件中添加以下依赖...
使用cqlsh访问Cassandra
下载和安装Cassandra 在Apache Cassandra官方网站下载最新版本的Cassandra然后解压，即可完成安装。wget http://mirror.bit.edu.cn/apache/cassandra/3.11.4/apache-cassandra-3.11.4-bin.tar.gz tar-zxf apache-cassandra-3.11.4-bin.tar....
MapReduce开发手册
EmrWordCount.java HADOOP_HOME：Hadoop的安装目录，通常Hadoop的安装目录为 usr/lib/hadoop-current。您也可以通过 env|grep hadoop 命令获取安装目录。X.X.X JAR包的具体版本号，需要根据实际集群中Hadoop的版本来修改。hadoop-common-X....
UDF示例：兼容Hive
更多安装操作，请参见 安装并配置MaxCompute客户端。注意事项 使用兼容的Hive UDF时，您需要注意： 在MaxCompute上使用 add jar 命令添加Hive UDF的资源时，您需要指定所有JAR包，MaxCompute无法自动将所有JAR包加入Classpath。调用Hive ...
使用JMeter轻松录制压测脚本
JMeter是Apache的开源压测工具，支持参数化、断言等功能。其丰富的开源生态提供了各种协议和控制器的扩展。本文将介绍如何使用JMeter来录制压测脚本，包括安装JMeter、配置代理、录制测试用例等步骤。（可选）步骤一：安装JMeter 首先需要...
手动集成Ranger Kafka插件
当E-MapReduce（简称EMR）的DataFlow集群没有安装Ranger Kafka插件，或者Ranger Kafka插件版本与实际使用的Ranger服务不兼容时，您需要手动集成插件。本文介绍如何手动安装Ranger Kafka插件以及配置生效Ranger Kafka插件。背景信息 除了...
通过开源Kafka客户端写入Lindorm流引擎数据
前提条件 已安装Java环境，要求安装JDK 1.7及以上版本。已将客户端IP地址添加至Lindorm实例的白名单中，具体操作请参见 设置白名单。已获取Lindorm流引擎的Lindorm Stream Kafka地址，具体操作请参见 查看连接地址。说明 Lindorm流引擎的...
Linux系统的ECS实例中如何添加Web站点
提示：如果您在自定义环境下添加Apache站点，请根据实际安装路径进行配置。基于IP地址 适用场景 适用于一台服务器有多个IP地址的情况。提示：目前阿里云的云服务器 ECS只允许绑定一个公网IP地址和一个私网IP地址，故此方法不适用。基于端口...
环境准备
25.77-b03,mixed mode)安装并启动Hadoop环境 下载2.6.0版本以上的Hadoop安装包，具体下载路径请参见 Hadoop安装包 解压并安装，根据实际集群情况安装Hadoop服务。按照如下示例启动Hadoop环境。bin/start-all.sh#检查服务是否成功启动。jps ...
通过开源Kafka客户端写入Lindorm消息引擎数据
前提条件 已安装Java环境，要求安装JDK 1.8及以上版本。已将客户端IP地址添加至Lindorm实例的白名单中，具体操作请参见 设置白名单。已获取Lindorm消息引擎Kafka地址，具体操作请参见 访问实例。注意事项 Lindorm消息引擎仅支持通过专有...
使用实例接入点收发消息
环境准备 安装1.8或以上版本JDK。具体操作。请参见 安装JDK 安装2.5或以上版本Maven。具体操作，请参见 安装Maven。安装编译工具。本文以 IntelliJ IDEA Ultimate 为例。安装Java依赖库 在 pom.xml 中添加以下依赖。org.apache.kafka kafka...
配置Gremlin请求超时时间
yum install-y apache-maven 说明 如果回显信息中报类似XXX的错误，您可以执行以下任意一种命令安装Maven。sudo yum install-y apache-maven-skip-broken sudo yum install-y apache-maven-nobest 创建用于连接图数据库GDB实例的配置文件...
High Level REST Client（6.3.x）
安装方法请参见 安装JDK。创建阿里云Elasticsearch实例，版本要求大于等于Java High Level REST Client的版本。本文创建一个6.3.2版本的实例，创建方法请参见 创建阿里云Elasticsearch实例。重要 High Level Client能够向上兼容，例如6.3.2...
通过ES-Hadoop将HDFS中的数据写入Elasticsearch
org.apache.hadoop hadoop-hdfs 2.8.5 org.apache.hadoop hadoop-mapreduce-client-jobclient 2.8.5 org.apache.hadoop hadoop-common 2.8.5 org.apache.hadoop hadoop-auth 2.8.5 org.elasticsearch elasticsearch-hadoop-mr 6.7.0 ...
PHP
（其他平台请根据实际情况进行安装配置）。您可以根据自己的实际环境修改IP地址和监听端口。更新配置后，需要重启Apache服务器，重启命令为 etc/init.d/apache2 restart。当使用nginx作为Web服务器时，请进行如下环境配置，此处以nginx1.19...
概述
Apache Druid是一个分布式内存实时分析系统，用于解决如何在大规模数据集下快速的、交互式的查询和分析问题。基本特点 Apache Druid具有如下特点：支持亚秒级的交互式查询。例如，多维过滤、Ad-hoc的属性分组和快速聚合数据。支持实时的...
默认接入点收发消息
安装1.8或以上版本JDK 安装2.5或以上版本Maven 安装编译工具。本文以 IntelliJ IDEA Ultimate 为例。安装Java依赖库 在IDEA中创建一个Java工程。在 pom.xml 中添加以下依赖。org.apache.kafka kafka-clients 2.4.0 org.slf4j slf4j-log4j12...
使用Cloud Toolkit快速创建Dubbo工程
IDEA中安装和配置Cloud Toolkit版本在2019.6.2及以上，安装步骤请参见 在IntelliJ IDEA中安装和配置Cloud Toolkit 操作步骤 打开IntelliJ IDEA，在菜单栏选择 File>New>Project。在 New Project 对话框左侧的导航栏中单击 Apache Dubbo，在...
自定义Sink
本地安装了文件传输工具（SSH Secure File Transfer Client）。操作步骤 创建自定义Sink。添加pom依赖。org.apache.flume flume-ng-core 1.9.0 说明 1.9.0 为Flume的版本信息，需要根据您创建集群的信息替换。编写自定义的Sink类。org....
Hive作业异常排查及处理
部分GroupBy语句引起的OOM 报错日志：22/11/28 08:24:43 ERROR Executor:Exception in task 1.0 in stage 0.0(TID 0)java.lang.OutOfMemoryError:GC overhead limit exceeded at org.apache.hadoop.hive.ql.exec.GroupByOperator....
Databricks Runtime
Databricks Runtime Databricks Runtime包括Apache Spark，但还添加了许多组件和更新，这些组件和更新极大地提高了大数据分析的可用性，性能和安全性。用于机器学习的Databricks Runtime（敬请期待）Databricks Runtime ML是Databricks ...
【漏洞预警】Apache Log4j2远程代码执行漏洞
近日，阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞，并将漏洞情况告知Apache软件基金会。本文为您介绍该漏洞的影响范围及相应的修复方案。漏洞影响 具体漏洞详情，请参见 【漏洞通告】Apache Log4j2远程代码执行漏洞...
背景信息以及准备工作
本文以Apache WebServer日志、Nginx访问日志、Apache Log4j日志为例，介绍如何通过DLA读取并分析OSS日志文件数据。前提条件 通过DLA读取OSS日志文件数据前，您需要通过以下操作在OSS中准备测试数据。开通OSS服务，详情请参见 开始使用OSS。...
- 产品推荐
- 这些文档可能帮助您