使用在线迁移服务跨账号迁移OSS数据
结合文件元数据信息，例如最后修改时间LastModified、文件大小Size和文件类型Content-Type等是否相同进一步判断覆盖或者跳过同名文件。更多参考 跨账号数据迁移的更多场景 迁移指定数据 以上场景假设了迁移整个Bucket的所有数据，如果您只...
使用数据迁移工具ossimport迁移OSS资源失败的解决方法
使用阿里云对象存储OSS时，将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中可以使用ossimport工具。本文介绍运用数据迁移工具ossimport迁移OSS资源失败的报错原因及解决方案。问题原因 使用ossimport迁移...
将半托管JindoFS集群迁移到OSS-HDFS服务
全量迁移模式负责将半托管JindoFS集群中的某个目录中的元数据一次性全量迁移OSS-HDFS服务中的某个目录。目前仅支持迁移到OSS-HDFS服务中的一级子目录。命令格式 jindo distjob-migrateImport-srcPath-destPath-backendLoc 参数说明如下：...
第三方数据源迁移到 OSS
您可以使用阿里云在线迁移服务将第三方数据源，如亚马逊AWS、谷歌云等数据轻松迁移至阿里云对象存储OSS。使用在线迁移服务，您只需在控制台填写源数据地址和目标OSS地址信息，并创建迁移任务即可。启动迁移后，您可以通过控制台管理迁移...
OSS中可以重命名Bucket吗？是否支持Object迁移？
OSS的Bucket不支持重命名。如果需要修改为其他名称，建议您重新创建Bucket，将原Bucket的文件迁移到新创建的Bucket后，删除...更多信息，请参见 阿里云OSS之间迁移教程。通过ossimport工具迁移数据。更多信息，请参见 数据迁移工具ossimport
使用数据复制功能迁移同账号下的OSS数据
在同一个阿里云账号下，您可以通过OSS的跨区域复制功能将地域A的某个存储空间（Bucket）数据迁移至地域B下的另一个Bucket。如果您需要将地域A某个Bucket的数据迁移至相同地域的另一个Bucket，请使用OSS的同区域复制功能。注意事项 数据迁移...
使用JindoTable MoveTo命令将Hive表和分区数据迁移至...
本文介绍如何使用JindoTable MoveTo命令将Hive表和分区数据迁移至OSS-HDFS服务。前提条件 已创建EMR-3.36.0及以上版本（除3.39.x版本以外）或EMR-5.2.0（除5.5.x版本以外）及以上版本的集群。具体步骤，请参见 创建集群。已通过Hive命令...
从HDFS迁移数据到OSS-HDFS
本文介绍如何使用阿里云Jindo DistCp从HDFS迁移数据到OSS-HDFS。前提条件 JDK 1.8及以上版本。如果您使用的是自建ECS集群，需要具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。如果您使用的是阿里云E-MapReduce，需使用EMR-5....
从HDFS迁移数据到OSS
但是该工具不能很好利用对象存储OSS的特性，导致效率低下并且不能保证数据一致性。此外，该工具提供的功能选项较单一，无法很好地满足用户的需求。阿里云Jindo DistCp（分布式文件拷贝工具）用于大规模集群内部或集群之间拷贝文件。Jindo ...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
从OSS迁移数据
本章节介绍如何将对象存储OSS上的数据迁移到文件引擎。准备工作 开通文件引擎，详情请参见 开通指南&。搭建Hadoop集群。建议您使用的Hadoop版本不低于2.7.3，本文档中使用的Hadoop版本为Apache&Hadoop& 2.7.3，修改Hadoop&配置信息，详情...
压缩数据从OSS迁移至MaxCompute
本文为您介绍如何通过MaxCompute外部表能力，将SNAPPY压缩文件数据（以半角逗号分隔）从OSS迁移至MaxCompute。前提条件 已开通MaxCompute并创建项目，详情请参见 创建MaxCompute项目。已开通OSS并创建存储空间，且Bucket中有压缩数据SNAPPY...
JSON数据从OSS迁移至MaxCompute
在DataWorks上新建数据表，用于存储迁移的JSON数据。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发 在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建表>表。在 新建表 ...
JSON数据从OSS迁移至MaxCompute
在DataWorks上新建数据表，用于存储迁移的JSON数据。登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表。选择工作空间所在地域后，单击相应工作空间后的 数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建表>表 在 新建表 ...
OSS和NAS之间的数据迁移
本文介绍如何实现阿里云对象存储OSS和文件存储NAS的数据双向迁移。使用ossutil工具迁移 ossutil工具为OSS官方命令行管理工具，适用于文件总量小于30 TB场景。具有如下特点： 提供方便、简洁、丰富的Object和Bucket管理命令，操作性能好。...
基于Logstash迁移OSS数据
当对象存储服务OSS（Object Storage Service）文件发生变更，触发阿里云消息服务MNS（Message Notification Service）事件通知时，您可以通过阿里云Logstash的logstash-input-oss插件获取OSS变更事件，再通过logstash-output-oss插件将数据...
在OSS-HDFS服务不同Bucket之间迁移数据
本文介绍如何使用阿里云Jindo DistCp在OSS-HDFS服务不同Bucket之间迁移数据。前提条件 JDK 1.8及以上版本。如果您使用的是自建ECS集群，需要具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。如果您使用的是阿里云E-MapReduce，...
某电商公司本地IDC数据迁移到OSS的案例
通过阿里云在线迁移服务将客户的数据从本地IDC迁移到OSS。迁移完成后，将业务切换到OSS上。步骤一：创建Bucket并修改存储地址 在深圳地域，创建用于存储数据的Bucket，配置方法请参见 创建存储空间。设置Bucket Policy，允许公司内部员工...
MaxCompute数据迁移至OSS
本文为您介绍如何使用DataWorks的数据同步功能将MaxCompute数据迁移至对象存储OSS（Object Storage Service）。前提条件 开通MaxCompute和DataWorks。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 创建业务流程...
某影视公司线下NAS数据迁移至OSS的案例
本文介绍杭州地区某影视公司内部NAS服务器内的数据迁移至阿里云OSS长期保存的案例。背景信息 杭州某影视公司内部NAS服务器中存放有公司制作的影音文件、资料等，数据约20 TB大小，500万个文件。NAS服务器在公司机房内，使用SMB系统，有安装...
使用JindoTable将Hive表和分区数据迁移到OSS/OSS-HDFS
阿里云提供OSS/OSS-HDFS作为HDFS的替代或补充，扩展云上Hadoop平台的存储能力。JindoTable工具可以将Hive数据根据分区键规则筛选，在HDFS和OSS/OSS-HDFS之间转移分区。本文介绍如何使用JindoTable将Hive表和分区数据迁移到OSS/OSS-HDFS。...
数据迁移概述
使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在对象存储OSS之间进行跨账号、跨地域、以及同地域内灵活的数据迁移。迁移时无需搭建迁移环境，可在线提交迁移任务并随时监控迁移过程。阿里云OSS之间数据迁移 ...
文件存储 HDFS 版和对象存储OSS双向数据迁移
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
互联网公司业务无缝迁移至阿里云OSS
创建用于存储迁移数据的OSS Bucket。具体操作，请参见 创建存储空间。创建用于迁移的子账号AccessKey。获取B存储服务子账号的AccessKey：登录原云服务控制台获取访问密钥（AccessKey）。获取阿里云OSS RAM用户的AccessKey：具体操作，请...
从HDFS迁移数据到OSS/OSS-HDFS
本文为您介绍如何使用阿里云JindoDistCp从HDFS迁移数据到OSS/OSS-HDFS。使用前须知 请参见 Jindo DistCp使用说明 内容进行环境适配和工具包下载。如果您在使用过程中遇到问题，可以参见 JindoDistCp常见问题 解决。操作步骤 拷贝数据到阿里...
使用JindoDistCp工具迁移第三方云对象存储数据到OSS/...
本文介绍如何通过JindoDistCp工具，将第三方云对象存储中的数据迁移到OSS/OSS-HDFS。前提条件 准备迁移环境并下载JindoDistCp工具，参见 JindoDistCp使用说明。已在Hadoop的 core-site.xml 文件里，配置AccessKey ID和AccessKey Secret。...
概述
您可以将同一个阿里云账号下的OSS某个存储空间（Bucket）的数据迁移至另一个Bucket，还可以跨不同阿里云账号迁移OSS Bucket之间的数据。OSS Bucket之间的数据迁移包含以下场景：同账号下的OSS数据迁移，即同一个阿里云账号下相同或者不同...
通过OSS将自建Elasticsearch数据迁移至阿里云
当您需要将自建Elasticsearch数据迁移至阿里云Elasticsearch时，可以使用OSS快照的方式进行迁移。即使用Elasticsearch的snapshot API，创建自建Elasticsearch数据的快照并存储到OSS中，然后从OSS将快照数据恢复到阿里云Elasticsearch中。...
简介
阿里云对象存储OSS最佳实践主要介绍数据迁移、数据备份和容灾、数据直传OSS、数据处理与分析、音视频转码、使用Terraform管理 OSS等操作，帮助您更加高效地使用OSS，满足您的业务需求。数据迁移 OSS之间数据迁移 第三方数据源迁移到OSS 从...
什么是对象存储OSS
阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，可提供99.9999999999%（12个9）的数据持久性，99.995%的数据可用性。多种存储类型供选择，全面优化存储成本。OSS具有与平台无关的RESTful API...
OSS-HDFS服务概述
作为云原生数据湖基础，OSS-HDFS在满足EB级数据分析、亿级文件管理服务、TB级吞吐量的同时，全面融合大数据存储生态，除提供对象存储扁平命名空间之外，还提供了分层命名空间服务。分层命名空间支持将对象组织到一个目录层次结构中进行管理...
ossimport概述
bos：从百度的云存储迁移到OSS。ks3：从金山云存储迁移到OSS。s3：从 Amazon S3 迁移到OSS。youpai：从又拍云迁移到OSS。http ：通过提供的HTTP或者HTTPS链接列表迁移数据到OSS。cos 从腾讯云存储COS迁移到OSS。azure：从Azure Blob迁移到...
常见问题
本文列举了对象存储OSS的用户经常咨询和关注的一些问题，帮助您快速了解OSS。一般常见问题 什么是阿里云OSS？阿里云对象存储服务OSS（Object Storage Service），是阿里云提供的海量、安全、低成本、高持久性的云存储服务，并可无限扩展。...
- 产品推荐
- 这些文档可能帮助您