文件存储 HDFS

\n\n文件存储HDFS适用于互联网行业、金融行业等大数据计算与存储分析需求的行业客户,进行海量数据存储和离线计算的业务场景,充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。

数据库文件存储

数据库文件存储(DBFS),是一款针对数据库场景的云原生共享文件存储服务。它基于共享存储架构设计,通过文件协议提供数据库定制功能,具备企业级存储特性。主要服务于云上自建数据库,基于传统SAN的应用等,为用户提供极致IO性能和高可用...

文件存储 NAS

阿里云文件存储NAS是一个可共享访问,弹性扩展,高可靠,高性能的分布式文件系统。兼容POSIX文件接口,可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问,您无需修改应用程序,即可无缝迁移业务系统上云。

文件存储 CPFS

CPFS(Cloud Paralleled File System)是一种并行文件系统。CPFS的数据存储在集群中的多个数据节点,并可由多个客户端同时访问,从而能够为大型高性能计算机集群提供高IOPS、高吞吐、低时延的数据存储服务。

存储网关

云存储网关,是一款可在用户IDC和阿里云上部署的软网关,以阿里云OSS为后端存储,通过低成本的虚拟机服务器,给云上和云下应用提供业界标准的NFS和CIFS文件存储服务。

设置我的访问路径

您可以在OSS管理控制台手动或自动添加OSS资源的访问路径,通过访问路径,您可以快速进入对应的存储空间(Bucket)或目录。手动添加访问路径 登录OSS管理控制台。...配置访问路径策略后,OSS将按照您设置的保存路径数记录您最近访问的路径。

创建文件系统实例后,为什么无法访问文件存储HDFS?

如果创建文件系统实例后无法访问文件存储HDFS,请根据以下几种情况进行排查: 确认访问文件存储HDFS服务的ECS实例对应的专有网络及虚拟交换机ID,与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载点使用的权限组中已配置权限规则,详情...

对象存储 OSS

对象存储服务(Object Storage Service,OSS)是一种海量、安全、低成本、高可靠的云存储服务,适合存放任意类型的文件。容量和处理能力弹性扩展,多种存储类型供选择,全面优化存储成本。

混合云存储阵列

混合云阵列(Hybrid Cloud Storage Array)是部署在IDC的一款硬件存储设备,提供本地文件和块存储服务,并且可以无缝的将数据迁移到云端。

如何选用NAS、OSS和EBS

文件存储NAS和对象存储OSS有什么不同?文件存储NAS和对象存储OSS的主要区别:您无需修改应用,即可直接像访问本地文件系统一样访问文件存储NAS。文件存储NAS提供高吞吐和高IOPS的同时支持文件的随机读写和在线修改。对象存储OSS是比较新的...

常见问题

产品简介FAQ 什么是文件存储NAS?适合什么应用场景?文件存储NAS支持哪些访问协议?如何选择NFS和SMB文件系统协议?每个账户可以创建多少个文件系统、文件系统有什么限制?更多产品简介常见问题 产品定价FAQ 开通NAS服务后,就开始计费吗?...

一般性问题

1.数据库文件存储DBFS是什么,适合什么场景?数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于: OLTP及OLAP数据库场景:例如,MySQL、PostgreSQL等。NoSQL数据库场景:例如,MongoDB、RocksDB等。...

开通文件存储HDFS服务

本文介绍如何开通文件存储HDFS服务。背景信息 在使用阿里云文件存储HDFS服务之前,请确保您已经注册了阿里云账号并完成实名认证。如果您还没有创建阿里云账号,系统会在您开通文件存储HDFS时提示您注册账号。操作步骤 登录阿里云官网。将...

新购ECS时挂载NAS文件系统

挂载多个文件系统 如果要在新购买的ECS实例上挂载多个NAS文件系统,请您继续单击增加文件存储进行配置。并注意以下几点配置事项:挂载地址: 所有的挂载地址必须属于同一个专有网络VPC。如果没有同属于一个VPC的挂载地址,可以为NAS添加...

使用Fuse-DFS挂载文件存储HDFS

本文主要介绍如何使用fuse-dfs工具实现文件存储HDFS在本地文件系统的映射。背景信息 Fuse-dfs是Hadoop项目自带的一个功能模块,提供了使用 FUSE(用户空间中的文件系统)在UNIX文件系统上映射HDFS的功能,在官方提供的Hadoop预编译版本中不...

开始使用文件存储HDFS

本章节介绍如何快速创建文件系统、创建权限组、创建权限组规则、添加挂载点及挂载文件系统等操作,旨在引导您快速使用文件存储HDFS的基础功能。文件存储HDFS允许您就像在Hadoop分布式文件系统 (HDFS)中管理和访问数据。您无需对现有大...

表格存储 Tablestore

表格存储(Tablestore)是构建在阿里云飞天分布式系统之上的 NoSQL 数据存储服务,提供海量结构化数据的存储和实时访问。

使用NAS静态存储

NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。本文介绍如何使用阿里云NAS静态存储卷,及如何实现持久化存储与共享存储。前提条件 已创建Kubernetes集群。具体操作,请参见创建Kubernetes托管版集群。已创建...

E-MapReduce数据迁移

本文介绍如何将E-MapReduce HDFS上的数据迁移到文件存储HDFS。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线批处理、在线...

使用限制

文件存储HDFS中文件/目录的命名规则如下限制:路径须是以unicode编码的字符或者字符串。文件名和目录名不能为如下字符串:空字符串 单个点(.) 两个点(.)文件名和目录名中不能包含如下字符:冒号(:)斜杠(/)波浪号(~)路径的元素...

断点续传上传

}/创建断点续传上传请求,并指定断点记录文件保存路径保存路径为断点记录文件的绝对路径。ResumableUploadRequest request=new ResumableUploadRequest(bucketName, objectName,localFilepath,recordDirectory);调用OSSAsyncTask ...

使用云企业网跨VPC访问文件存储HDFS

本文档主要介绍如何使用云企业网(CEN)跨VPC访问文件存储HDFS。背景信息 阿里云提供云企业网服务实现跨VPC访问文件存储HDFS,主要场景如下所示。场景 描述 同账号同地域跨VPC访问文件存储HDFS 访问文件存储HDFS的计算实例(例如ECS)与...

什么文件存储HDFS

阿里云文件存储HDFS(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。文件存储HDFS允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System) 中管理和访问数据。您无需对现有大数据分析...

功能特性

文件存储HDFS具有无缝集成、共享访问、安全控制、线性扩展等多种特性。无缝集成 文件存储HDFS允许您就像在Hadoop分布式文件系统 (HDFS)中管理和访问数据。文件存储HDFS SDK可在所有Apache Hadoop 2.x环境中使用,包括阿里云EMR和阿里云...

回收站

在选择文件的恢复路径对话框,选择文件恢复后的存储路径,单击确认。恢复至原路径:当文件被删除前的路径存在时,文件将恢复至该路径下。当文件被删除前的路径不存在,请您选择自定义恢复路径。自定义恢复路径:选择一个已存在的路径,存放...

什么文件存储NAS

文件存储NAS的数据在后端进行多副本存储,每份数据都有多份拷贝在故障域隔离的不同设备上存放,提供99.999999999%的数据可靠性,能够有效降低数据安全风险。高性能 基于分布式架构文件系统,随着容量的增长性能线性扩展,提供远高于传统...

产品简介FAQ

本文介绍了文件存储NAS产品简介中的常见问题。什么文件存储NAS?适合什么应用场景?阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统,兼容了POSIX文件接口,可支持数千台计算节点共享访问,可以挂载到弹性...

迁移开源HDFS的数据到文件存储HDFS

如果连通失败,请参见创建文件系统实例后,为什么无法访问文件存储HDFS?进行排查。准备迁移工具。您可以通过Hadoop社区标准的Distcp工具实现全量或增量的HDFS数据迁移,详细的Distcp工具使用说明请参见Hadoop Distcp 工具官方说明文档。...

应用场景

文件存储HDFS适用于对吞吐要求较高的大数据分析与机器学习的业务需求场景。...或其他机器学习应用部署在多个计算资源上,这样应用可以直接通过Hadoopfs接口访问数据进行离线或在线计算,也可以直接将计算结果输出到文件存储HDFS做永久保存

使用NAS动态存储

本文介绍如何使用阿里云NAS动态存储卷,及如何验证NAS存储卷的持久化存储与共享存储特性。前提条件 已创建Kubernetes集群。具体操作,请参见创建Kubernetes托管版集群。已创建动态NAS卷。请参见创建文件系统。若需要加密NAS存储卷中的数据...

入门概述

本文介绍阿里云文件存储NAS的基本使用流程,帮助您快速上手文件存储NAS。使用流程.aliware-img-container { position: relative;}.aliware-img-container.aliware-pic { display:inline-block;height:auto;高度自动适配图片*/max-width:100...

生命周期管理FAQ

删除生命周期管理策略会有什么影响?被删除的生命周期管理策略所关联目录下的文件将不会被转储至低频介质中。关联目录下已经转储至低频介质中的文件仍将维持当前存储状态。已设置生命周期管理策略的目录删除策略后,重新设置新的生命周期...

CDH6数据迁移

本文档介绍如何将CDH中本地HDFS的数据迁移到文件存储HDFS。前提条件 在阿里云上创建ECS集群并安装CDH,具体安装方法请参考CDH相关文档。背景信息 CDH(Cloudera's Distribution,including Apache Hadoop)是众多 Hadoop 发行版本中的一种,...

文件存储NFS文件系统间的数据迁移

本文介绍如何在阿里云文件存储NFS文件系统之间迁移数据。前提条件 拥有一个存有数据的NFS文件系统,并且拥有一个专有网络类型挂载点。准备工作 查看源挂载点信息。迁移之前请记录源文件系统的挂载点和所属的专有网络VPC信息,详情请参见...

文件存储HDFS上使用TensorFlow

由于TensorFlow对文件系统的schema特别的指定,因此在文件存储HDFS上使用TensorFlow时需要修改TensorFlow源码,详情请参见配置TensorFlow支持文件存储HDFS。准备工作 开通文件存储HDFS服务并创建文件系统实例和挂载点,详情请参见HDFS...

产品定价FAQ

即通用型NAS文件系统用量明细=文件存储使用量+回收站暂存文件存储容量。包年包月模式的极速型NAS文件系统能否转换为按量付费模式?不能。已创建的极速型NAS文件系统不支持付费方式变更。当您的包年包月极速型NAS文件系统到期后,您可以新建...

阿里云存储服务

阿里云提供针对各种存储资源(块、文件和对象)的低成本、高可靠、高可用的存储服务,涵盖数据备份、归档、容灾等场景。

智能云相册

智能云相册(Cloud Photos)是阿里云为影像类应用提供的一站式解决方案。智能云相册除了提供影像文件存储、管理等基础功能以外,还支持对影像内容进行分类打标、面孔识别等智能分析,并提供基于自然语言理解的智能搜索服务。

目录配额

NAS配额的设置为异步执行,因此限制型配额的生效和失效都有延迟(正常情况下5分钟~15分钟)。新建目录配额 登录NAS控制台。在左侧导航栏,选择文件系统 文件系统列表。找到目标文件系统,单击文件系统ID或者单击管理,进入页面,单击新建...

创建文件系统

文件系统实例是实际运行的文件存储HDFS实体。在使用文件存储HDFS前,需要先创建文件系统实例。操作步骤 登录文件存储HDFS控制台。在导航栏选择要创建文件系统实例的区域,如华东1(杭州)。在概览页面,单击创建文件系统。说明 文件系统...
< 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
对象存储 块存储 文件存储 云服务器 物联网无线连接服务 SSL证书 短信服务 移动推送
这些文档可能帮助您
开始使用OSS 什么是对象存储OSS 快速使用ossbrowser 使用STS临时访问凭证访问OSS 计量计费概述 开始使用文件存储HDFS

新品推荐

你可能感兴趣

热门推荐

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折