应用场景
数据审计 智能解析数据库及大数据的通信流量，细粒度审计数据访问行为，通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警，为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据，...
基线检查
标准策略 企业版 旗舰版 该类型策略包含120+基线检查项，支持以下基线类型：Windows基线 未授权访问 等保合规 最佳安全实践 基础防护安全实践 国际通用安全最佳实践 弱口令 Linux基线 未授权访问 等保合规 最佳安全实践 容器安全 国际通用...
配置回调通知
内容安全最多重复推送3次回调消息。回调数据 回调数据是内容安全服务端向您设置的回调通知地址返回的数据内容。关于回调数据的结构描述，请参见 回调通知表单数据。表 1.回调通知表单数据 名称 类型 描述 checksum String 总和校验码，由...
Hadoop DistCp介绍
使用方法 Hadoop DistCp最常见的调用是集群间拷贝，例如将nn1集群的/foo/bar 目录下的数据拷贝至nn2集群的/bar/foo 目录下：hadoop distcp hdfs:/nn1:8020/foo/bar hdfs:/nn2:8020/bar/foo 更多使用说明，请参见 Hadoop社区的DistCp使用...
网络开通流程
为Hadoop集群的安全组配置如下信息，确保MaxCompute可以访问Hadoop集群。安全组配置内容如下：配置Hadoop集群所在安全组的入方向访问规则。授权对象为ENI所在的安全组，即步骤2中创建的安全组。HiveMetaStore端口：9083。HDFS NameNode端口...
存储管理
背景信息 存储空间全部存满后，堡垒机会删除最早的审计会话数据。建议您根据业务需求，为审计会话数据设置合理的保存时长。查看存储状态 登录 堡垒机控制台，在顶部菜单栏，选择堡垒机所在的地域。在堡垒机实例列表，定位到目标实例，单击 ...
API概览
本产品（云安全中心/2018-12-03）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
DeleteSuspEventNode-删除安全告警备注
删除安全告警的备注记录。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
MaxCompute+Hadoop搭建实践
本文以E-MapReduce的Hive为例，为您介绍在MaxCompute中如何创建外部项目，并查询Hadoop中的表数据。准备Hadoop数据源 创建Hadoop集群，具体操作请参见 开通阿里云EMR服务。进入Hive准备数据。使用Workbench方式登录集群主节点后，在终端...
HDFS数据源
由于snappy目前没有统一的stream format，数据集成目前仅支持最主流的hadoop-snappy（hadoop上的snappy stream format）和framing-snappy（google建议的snappy stream format）。ORC文件类型下无需填写。否 无 parquetSchema 如果您的文件...
Hadoop生态外表联邦分析
云原生数据仓库AnalyticDB PostgreSQL版 支持通过外表访问Hadoop生态的外部数据源（包括HDFS与Hive）。注意事项 本特性只支持存储弹性模式实例，且需要 AnalyticDB PostgreSQL版 实例和目标访问的外部数据源处于同一个VPC网络。2020年9月6...
IoT安全运营中心（后付费）说明
收费范围：IoT安全运营中心 IoT安全运营中心是指IoT安全中心的一部分功能集合，包括：安全检测（除固件安全检测外）、安全合规、安全防护（除固件加固外）、安全分析。付费模式：后付费 IoT安全运营中心支持后付费，您可以通过“无代理、有...
代理接入
针对无法直接连接到云安全中心服务端的线下IDC（Internet Data Center）机房、混合云、阿里云VPC（Virtual Private Cloud）等业务场景，您可以通过设置代理服务器，将无法连接公网的服务器（包括主机、容器）接入云安全中心进行防护。...
使用EasyRec读取Hive表
将DataScience集群的所有公网IP地址，添加至Hadoop集群的安全组中，端口为10000和9000，详情请参见 添加安全组规则。修改 ml_on_ds 目录下的文件。上传获取到的 dsdemo*.zip 至DataScience集群的header节点。通过SSH方式连接DataScience...
创建OSS外部表
背景信息 对象存储服务OSS 是一种海量、安全、低成本、高可靠的云存储服务，适合存放任意类型的数据文件。当您需要使用MaxCompute读取存储在OSS目录中的数据或需要将MaxCompute项目中的数据写入OSS目录时，可以在MaxCompute项目中创建OSS...
UNLOAD
外部存储：OSS 您可以一键授权，具备更高安全性。详情请参见 STS模式授权。说明 本文示例采用一键授权方式，角色名称定义为 AliyunODPSDefaultRole。外部存储：Hologres 您可创建一个RAM角色，为其授权允许MaxCompute访问的权限，并将角色...
UNLOAD
外部存储：OSS 您可以一键授权，具备更高安全性。详情请参见 STS模式授权。说明 本文示例采用一键授权方式，角色名称定义为 AliyunODPSDefaultRole。外部存储：Hologres 您可创建一个RAM角色，为其授权允许MaxCompute访问的权限，并将角色...
使用PyJindo访问阿里云OSS-HDFS
其中，Hadoop配置文件及HADOOP_CONF_DIR不是必须，仅为兼容HADOOP环境中的配置。export JINDOSDK_CONF_DIR=etc/taihao-apps/jindosdk-conf export HADOOP_CONF_DIR=etc/taihao-apps/hadoop-conf 安装和升级pip及PyJindo安装包。python3.8-m...
数据同步
ls/tmp/cdc/staging_sales/Found 2 items-rw-r-2 hadoop hadoop 0 2019-11-26 11:11/tmp/cdc/staging_sales/_SUCCESS-rw-r-2 hadoop hadoop 93 2019-11-26 11:11/tmp/cdc/staging_sales/part-m-00000 为更新数据建立临时表，然后MERGE到...
异构数据源访问
为确保 AnalyticDB PostgreSQL版 与Hadoop间的网络端口畅通，需将以下异构数据源访问功能会用到的Hadoop服务默认的端口全部加入安全组。具体操作，请参见 添加安全组规则。服务 端口号 Namenode IPC Hadoop2.x版本：8020 Hadoop3.x版本：...
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
写入文件提示无法满足最小写入副本要求
如果连通的命令长时间或超时不返回信息，则可通过以下命令，检查NameNode节点和DataNode节点是否在同一安全组下。hadoop dfs-ls/检查DataNode服务是否启动。登录DataNode服务所在节点，请参见 登录集群。切换到hdfs用户。su-hdfs 执行以下...
Hadoop
本文主要介绍如何使用DLA Spark访问用户VPC中的HADOOP集群（开启kerberos认证的集群暂不支持）。前提条件 您已开通数据湖分析DLA（Data Lake Analytics）服务。如何开通，请参见 开通云原生数据湖分析服务。您已登录云原生数据库分析DLA...
多账号安全管理
在 可信服务 页面，找到 云安全中心 或 云安全中心-威胁分析，在 操作 列单击 管理。在 委派管理员账号 区域，单击 添加。在 添加委派管理员账号 面板，选择需要设置为委派管理员的成员，然后单击 确定。添加成功后，使用该委派管理员账号...
安全服务
安全产品运营 针对没有专业安全人员的企业，安全管家提供专业的安全产品托管服务（包括云盾安全产品和第三方安全产品），支持代运维安全产品，并根据安全威胁管理安全产品配置定制安全策略，为您搭建牢固的安全防御体系。安全效果分析 实施...
搭建Hadoop环境
sudo sh-c 'echo"export JAVA_HOME=usr/java8">>/opt/hadoop/etc/hadoop/yarn-env.sh' sudo sh-c 'echo"export JAVA_HOME=usr/java8">>/opt/hadoop/etc/hadoop/hadoop-env.sh' 执行以下命令，测试Hadoop是否安装成功。hadoop version 返回...
漏洞管理常见问题
因此，您可以通过以下方式查看当前软件版本的漏洞信息：在云安全中心中查看当前软件版本及漏洞信息 您可以在 云安全中心控制台 风险治理>漏洞管理 页面，查看云安全中心在您的服务器上检测到的系统软件版本及漏洞信息。系统软件漏洞各项...
安全报告
删除安全报告 您可以在安全报告卡片选择 更多>删除，删除安全报告。说明 报告删除后不可恢复，请谨慎操作。不允许删除云安全中心默认创建的安全报告。相关文档 为保障您的资产安全，建议您在收到含有安全风险提示的安全报告后，立即检查并...
使用Druid
header-1.cluster-5678 iZbp10tx4egw3wfnh5o*安全Hadoop集群，请按如下操作进行：确保集群间能够通信（两个集群在一个安全组下，或两个集群在不同安全组，但两个安全组之间配置了访问规则）。在E-MapReduce Druid集群的每个节点的指定路径...
创建安全基线
删除：单击 删除，删除目标安全基线模板。后续步骤 在创建内网零信任策略时，需要绑定已有的终端属性组，对满足属性组配置的可信终端，访问企业内网的行为进行放行。关于创建内网零信任策略的详细内容，请参见 配置零信任策略。
生成keytab配置文件
MaxCompute与Hadoop集群构建湖仓一体时，如果Hadoop集群开启了Kerberos安全机制，则需要上传keytab配置文件。本文为您介绍如何生成keytab配置文件。操作步骤 以下以阿里云E-MapReduce（EMR）为例，说明生成keytab配置文件的过程。使用SSH...
总览
云安全中心提供云资产安全运营展示功能，帮助您全面了解云资产的安全情况，包括云资产的安全状态、安全评估结果、各种安全事件的实时监控和预警等。本文介绍云安全中心的安全总览信息。总览 总览页面从安全评分、安全风险、安全运营趋势...
安全中心
EMR Workflow的安全中心支持管理集群、告警组和告警实例。本文为您介绍如何绑定集群、创建告警实例和告警组。前提条件 已创建集群，具体操作请参见 创建集群。绑定集群 说明 支持绑定的集群类型为DataLake、Hadoop和Custom。进入安全中心...
Hadoop Yarn RPC 0 Day在野利用分析与传播手段披露
安全建议 阿里云安全发现该漏洞后及时向Apache、Hadoop做了邮件沟通，并得到了官方认可和相关处理建议，邮件中提及存储和计算节点在提交任务时最好通过Kerberos进行认证以保证其安全性。依据官方建议开启Kerberos认证，配置后的...
Spark常见问题
使用AccessKey鉴权，配置示例如下：val conf=new SparkConf().setAppName("jindo-sdk-demo")#配置access-key鉴权参数.set("spark.hadoop.fs.oss.accessKeyId",").set("spark.hadoop.fs.oss.accessKeySecret","<YourAccessKeySecret>")使用...
Teamtnt变种攻击Hadoop集群
可能导致核心业务终止，从而影响企业服务 无 计划任务或作业（crontab或cron.d）无 隐藏文件 系统网络配置 无 Web服务 无 无 第三方软件 无 清除历史 网络服务扫描 无 数据编码 无 无 无 无 文件删除 安全软件 无 无 无 无 无 无 文件或...
自建Hadoop数据迁移到阿里云E-MapReduce
客户在IDC或者公有云环境自建Hadoop集群，数据集中保存在HDFS文件系统用于数据分析任务。客户在决定上云之后，会将自建Hadoop集群的数据迁移到阿里云自建Hadoop集群或者EMR集群。本实践方案提供安全和低成本的HDFS数据迁移方案。适用场景 ...
应用行为分析
应用分析功能提供了应用行为、应用接入、被攻击服务器、攻击防护趋势等统计数据，为应用系统加固提供数据参考，帮助您快速了解应用程序的安全防护水平，降低应用安全管理的复杂度。本文介绍如何查看和使用应用分析数据。查看攻击防护效果 ...
内容检测API
内容安全图片审核同步接口一次调用最多支持100个检测元素，即每次提交100条内容进行检测。但是支持100个元素的前提是需要将并发调整到100以上，内容安全API默认并发是：图片审核50张，文本审核100条，视频 和语音 审核20路。更多信息，请...
网络配置
说明 请勿删除该安全组规则。设置公网访问控制，单击 确定，堡垒机实例的状态变为 初始化中。10分钟后，刷新云盾堡垒机管理控制台页面查看堡垒机实例状态，如状态变更为 有效，则堡垒机实例启用成功。启用经典网络类型的堡垒机实例 参考...
- 产品推荐
- 这些文档可能帮助您