挂载文件存储 HDFS 版文件系统
本文介绍挂载及卸载 文件存储 HDFS 版 文件系统的操作。前提条件 已为ECS实例安装JDK，且JDK版本不低于1.8。已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已安装Hadoop客户端，建议您使用...
SDK示例
前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已安装JDK，且JDK版本不低于1.8。已安装 文件存储 HDFS 版 文件系统SDK。具体操作，请参见 安装文件系统SDK 背景信息 文件...
API概览
本产品（文件存储 HDFS 版/2018-06-20）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...
创建并管理文件系统
本文为你介绍如何创建和管理文件系统。创建文件系统 创建文件系统，并通过多台计算实例挂载使用，实现文件系统的共享访问。登录 边缘节点服务 ENS控制台。在左侧导航菜单选择 存储与快照>协同存储NAS。在 协同存储NAS 页面，单击 创建NAS。...
卸载并释放CDH6 HDFS服务使用的云盘
文件存储 HDFS 版 文件系统。具体操作，请参见 配置CDH6使用文件存储HDFS版。背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建CDH HDFS服务的云盘，...
什么是CPFS智算版（邀测）
CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务，支持端到端RDMA网络，应用于AIGC、自动驾驶等智算场景。本文介绍CPFS智算版的使用限制、费用说明及操作指引。关于CPFS智算版的性能指标，请参见 产品规格。使用限制 仅...
常见问题排查
本文介绍使用 文件存储 HDFS 版 文件系统SDK时遇到的常见问题及排查方法。提示 java.lang.ClassNotFoundException 信息 执行 hadoop 命令或者任务失败，提示 java.lang.ClassNotFoundException:Class ...
安装文件系统SDK
本文档主要介绍 文件存储 HDFS 版 文件系统SDK的安装及使用方式。前提条件 已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已为ECS实例安装JDK，且JDK版本不低于1.8。背景信息 本文以hadoop...
功能清单
轻量版、标准版、企业版、旗舰版、英文版 多轮对话管理 多轮对话流增删改查、导入导出与发布 系统意图/自定义意图管理 系统实体/自定义实体管理 自定义变量管理 全局话术模板管理 标准版、企业版、旗舰版、英文版 表格问答管理 表格数据...
性能监控
您可以通过阿里云云监控来监控文件系统读请求频率、读取请求大小、每秒读取字节数、存储空间等。并通过设置报警规则，及时获取异常信息。本文介绍如何查看性能监控详情及创建报警规则。前提条件 已创建 文件存储 HDFS 版 文件系统。具体...
在文件存储 HDFS 版上使用Apache Spark
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK...
概述
应用场景 企业文件管理系统 您可以根据关键词查询文件，例如查询包含某个关键词的文件，查询包含某个人物的视频，统计某个目录下的文件大小等，便于对数据进行管理和分析，更高效地利用OSS或者PDS服务，降低成本，挖掘数据价值，适用于各...
在文件存储 HDFS 版上使用Apache HBase
本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。已部署...
在文件存储 HDFS 版上使用Apache Flink
本文介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Flink。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
CreateVscMountPoint-创建VSC挂载点
版文件系统的ECS实例ID。添加多个ECS实例ID时，使用半角逗号（,）分隔。最多支持100个ECS实例ID。i-bp1g6zv0ce8oghu7*","i-bp1g6zv0ce8oghu1*"]Description string 否 挂载点描述信息。长度为0~100个字符。内部实例挂载的HDFS文件系统。...
AttachVscMountPoint-绑定VSC挂载点
是 待挂载文件存储 HDFS 版文件系统的ECS实例ID。添加多个ECS实例ID时，使用半角逗号（,）分隔。最多支持100个ECS实例ID。i-bp1g6zv0ce8oghu7*","i-bp1g6zv0ce8oghu1*"]VscIds array 是 待挂载HDFS文件系统的VSC ID。建议添加不超过100个...
在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK，JDK版本不低于1.8...
产品规格
文件存储CPFS支持三种存储规格，分别为100 MB/s/TiB基线、200 MB/s/TiB基线和 400 MB/s/TiB基线（CPFS智算版） 本文列举了在相同文件系统容量下使用不同客户端访问文件系统时，100 MB/s/TiB基线、200 MB/s/TiB基线、400 MB/s/TiB基线的文件...
准备工作
管理文件系统数据访问权限。步骤三：创建用于迁移数据的RAM用户 为了保证数据安全，推荐您创建RAM用户并按照最小权限原则对该RAM用户进行授权后用于迁移数据。说明 如果需要跨账号迁移数据，请分别在源阿里云账号和目标阿里云账号创建相应...
简介
通过控制台配置NFS ACL功能 登录阿里云 NAS控制台，选择 文件系统>文件系统列表，找到目标文件系统，单击文件系统ID或者 管理。选择 访问控制 页签，单击 开启，打开NFS ACL功能。单击 关闭（默认状态），停止NFS ACL功能。
HDFS概述
用于管理文件系统的命名空间、维护文件系统的目录结构树以及元数据信息，记录写入的每个数据块（Block）与其归属文件的对应关系。此信息以命名空间镜像（FSImage）和编辑日志（EditsLog）两种形式持久化在本地磁盘中。DataNode DataNode是...
GetMountPoint-查询挂载点信息
您可以在已挂载的VPC网段内通过此域名访问文件存储 HDFS 版文件系统。f-37af8f42f*.cn-hangzhou.dfs.aliyuncs.com RegionId string 地域ID。cn-hangzhou 示例 正常返回示例 JSON 格式 {"RequestId":"55C5FFD6-BF99-41BD-9C66-FFF39189*", ...
ListMountPoints-批量查询挂载点信息
您可以在已挂载的VPC网段内通过此域名访问文件存储 HDFS 版文件系统。f-37af8f42f*.cn-hangzhou.dfs.aliyuncs.com RegionId string 地域ID。cn-hangzhou 示例 正常返回示例 JSON 格式 {"TotalCount":1,"RequestId": 55C5FFD6-BF99-41BD-9...
搭建TensorFlow
具体操作，请参见 管理文件系统 和 管理挂载点。操作步骤 创建镜像缓存 镜像缓存功能已经通过Kubernetes CRD的方式集成到 ACK Serverless集群 中，可以用于加速镜像拉取。创建镜像缓存的YAML文件。示例imagecache.yaml的内容如下：说明 ...
lo-funcs
有这类特权的恶意用户可以很容易地利用它们成为超级用户（例如通过重写服务器配置文件），或者攻击该服务器文件系统的其他部分而无需获得数据库超级用户特权。因此对具有这类特权的角色访问必须受到和超级用户角色一样的仔细保护。尽管如此...
开始使用OSS
基于OSS的文件系统管理 OSS的存储空间内部是扁平的，没有文件系统的目录等概念，所有的对象都直接隶属于其对应的存储空间。如果您想要像使用本地文件夹和磁盘那样来使用OSS存储服务，可以通过配置云存储网关来实现。通过云存储网关提供的...
posix
组件支持以下功能：pthread 线程及其属性管理 pthread 条件变量及其属性管理 pthread 互斥及其属性管理 文件系统类接口 环境变量管理 POSIX信号量 POSIX定时器 POSIX消息队列 版权信息 说明 Apache license v2.0 目录结构 posix|-example ...
ListUserGroupsMappings-查看用户和组的映射关系
版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过OpenAPI进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息，请参见 目录和文件访问权限。单个文件系统存在用户和组数量的限制，包括：单个文件系统最多...
秒级闪回实时容灾
ZFS是一款动态文件管理系统，与其他文件系统的管理方式不同，ZFS采用存储池的概念来管理物理存储空间，把所有设备集中到一个存储池中来进行管理。存储池描述了存储的物理特征（设备的布局、数据的冗余等），使得文件系统不再局限于单独的...
CreateUserGroupsMapping-创建用户和组的映射关系
版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过OpenAPI进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息，请参见 目录和文件访问权限。单个文件系统存在用户和组数量的限制，包括：单个文件系统最多...
DeleteUserGroupsMapping-删除用户和组的映射关系
文件存储HDFS版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过OpenAPI进行管理。有关文件存储HDFS文件系统目录和文件访问权限的信息，请参见文件和目录权限。文件系统不允许删除用户和组，只能删除用户和组的映射关系。...
在线预览视频
开通视频转码 企业版文件管理服务（EDM）默认已经开通。开发版需要您通过 官方钉群 联系我们开通，开通视频转码没有费用，但在使用过程中会产生费用，资费标准 增值服务计费项。上传视频文件 新上传的视频或者已经上传的视频文件都可以，这...
入门概述
通过控制台创建文件系统 通过API管理文件系统 添加挂载点 添加挂载点 通过挂载点实现数据传输。根据业务需求选择NFS挂载点或POSIX挂载点。管理NFS挂载点（推荐）管理POSIX挂载点 挂载文件系统 使用ECS挂载文件系统 在ECS上挂载文件系统。...
添加数据源
NameNode作为主服务器，管理HDFS文件系统的命名空间和客户端对文件的访问操作。NameNode 端口 用于表示HDFS主服务器的端口号。Secondary NameNode 网络地址 用于表示HDFS的辅助节点网络地址。辅助节点用于协助主服务器的管理工作。...
添加数据源
NameNode作为主服务器，管理HDFS文件系统的命名空间和客户端对文件的访问操作。例如网络地址为 47.100.XX.XX，端口为 9000 则数据源地址为 47.100.XX.XX:9000。NameNode 端口 用于表示HDFS主服务器的端口号。例如 9000。Secondary NameNode...
0011-00000008
问题描述 文件元信息中Content-Encoding的值包含非法字符。问题原因 请求中指定了文件元信息，但是文件元信息中的Content-Encoding字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过...相关文档 管理文件元信息 PostObject
0011-00000007
问题描述 文件元信息中Content-Disposition的值包含非法字符。问题原因 请求中指定了文件元信息，但是文件元信息中的Content-Disposition字段包含非法字符。问题示例 例如，您发起了PostObject请求，并...相关文档 管理文件元信息 PostObject
0011-00000010
问题描述 文件元信息中Expires的值包含非法字符。问题原因 请求中指定了文件元信息，但是文件元信息中的Expires字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Expires字段...相关文档 管理文件元信息 PostObject
0011-00000006
问题描述 文件元信息中Content-Type的值包含非法字符。问题原因 请求中指定了文件元信息，但是文件元信息中的Content-Type字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的...相关文档 管理文件元信息 PostObject
0011-00000009
问题描述 文件元信息中Cache-Control的值包含非法字符。问题原因 请求中指定了文件元信息，但是文件元信息中的Cache-Control字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Cache-...管理文件元信息 PostObject
- 产品推荐
- 这些文档可能帮助您