odps是什么?

ODPS(Open Data Processing Service), 阿里巴巴通用计算平台提供的一种快速、完全托管的 GB/TB/PB 级数据仓库解决方案,现在已更名为MaxCompute,MaxCompute 向用户提供了完善的数据导入方案以及 ...
来自: 开发者社区 > 博客 作者: 隐林 浏览:1191 回复:0

资源管理,上传资源:上传为ODPS资源本次上传,资源会同步上传至ODPS中,请问如果我上传的文件名字为abc.csv,那么保存到ODPS表里面对应的表名字是什么?是否可以通过SQL语句查询上传后的文件对应的表数据?

资源管理,上传资源:上传为 ODPS资源本次上传,资源会同步上传至 ODPS中,请问如果我上传的文件名字为abc.csv,那么保存到 ODPS表里面对应的表名字 什么?是否可以通过SQL语句查询上传后的文件对应的表数据? ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:254 回复:1

使用MaxCOmpute python SDK读取ODPS上一张表,做一些处理后,写入另外一张表,读取和写入都是多线程的。遇到问题1. 多线程处理时,每个线程每次循环(每次循环

使用MaxCOmpute python SDK读取 ODPS上一张表,做一些处理后,写入另外一张表,读取和写入都 多线程的。遇到问题1. 多线程处理时,每个线程每次循环(每次循环处理100条数据)均新建了一个 odps连接,有没有可能 ...
来自: 开发者社区 > 问答 作者: 知与谁同 浏览:557 回复:1
推荐

万券齐发助力企业上云,爆款产品低至2.2折起!

组合特惠:ECS突发性能 t5+对象存储OSS+数据库备份DBS ¥115.80起,高性价比之选,适合轻量级应用
广告

odps查询数据,总是提示报错,FAILED: ODPS-0140181:Sql plan exception - Could not generate job json, : 麻烦帮查下是什么原因

odps查询数据,总 提示报错,FAILED: ODPS-0140181:Sql plan exception - Could not generate job json, <type 'exceptions.MemoryError'> :麻烦帮查下 什么原因 ...
来自: 开发者社区 > 问答 作者: 琴瑟 浏览:571 回复:1

大数据开发套件写MaxCompute(原ODPS) MR,JAR路径问题 我什么事用$符号 , $是干什么用的? 路径怎么写都不对。

大数据开发套件写MaxCompute(原 ODPS) MR,JAR路径问题 我 什么事用$符号 , $ 什么用的? 路径怎么写都不对。![image](https://yqfile.alicdn.com/9868b7d2bb00da499f13f ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:109 回复:1

;Quening...状态,无法执行,使用show p查看任务时,发现什么任务都没执行,请问是什么原因导致我无法执行操作?并且我将执行很多任务,这样一来就会导致我的任务无法正常执行。

;p查看任务时,发现 什么任务都没执行,请问 什么原因导致我无法执行操作?并且我将执行很多任务,这样一来就会导致我的任务无法正常执行。 ...
来自: 开发者社区 > 问答 作者: 知与谁同 浏览:430 回复:1

需要把计算结果存成文件upload到oss,执行MR, 出现以下错误, 请问是什么原因? FAILED: ODPS-0123131:User defined function exception

需要把计算结果存成文件upload到oss,执行MR, 出现以下错误, 请问 什么原因?FAILED: ODPS-0123131:User defined function exception - Traceback:java.lang.NoClassDefFoundError: java/io/FileInputStream ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:417 回复:1

MaxCompute(原odps)是否支持快照,changelog的设置方式是什么,如果有文档请发一下。

MaxCompute(原 odps)是否支持快照,changelog的设置方式 什么,如果有文档请发一下。 ...
来自: 开发者社区 > 问答 作者: 知与谁同 浏览:306 回复:2

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded limit of 1000. 是什么原因呢?

在执行MaxCompute的sql查询时遇到这样的错误:FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded limit of 1000. 什么原因呢? ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:108 回复:1

请问,ODPS是基于Hadoop什么版本的?

新手,有大数据分析处理的需求。希望基于hadoop来进行处理,经过选择,初步决定使用阿里云 ODPS作为平台。但是在学习hadoop的过程中发现hadoop不同版本之间的差异还是比较大。所以想了解,如果我要在阿里云 ODPS上面进行mapreduce处理,我应该学习hadoop的哪个版本,才能更快的在 ODPS上面进行应用? ...
来自: 开发者社区 > 论坛 作者: gg云 浏览:3474 回复:0

在新方案中,ODPS的应用场景是什么?数据分析吗

在新方案中, ODPS的应用场景 什么?数据分析吗 ...
来自: 开发者社区 > 问答 作者: 云篆 浏览:800 回复:2

您好,我从官方文档下载了MaxCompute(原ODPS) odpscmd 客户端,修改好配置文件打开cmd出现下面的界面,没有命令行,请问这是什么原因?

您好,我从官方文档下载了MaxCompute(原 ODPS) odpscmd 客户端,修改好配置文件打开cmd出现下面的界面,没有命令行,请问这 什么原因?![image](https://yqfile.alicdn.com/697bc00f09ea0b7d4d70112a9073e31e9358b1ce.png) ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:99 回复:1

我想把数据从ODPS 导入到OTS,用 maxCompute2.0 导入,建外部表的时候有下面的报错,请问是什么原因?我的同事说你们这边已经帮我们开通了2.0了

我想把数据从 ODPS 导入到OTS,用 maxCompute2.0 导入,建外部表的时候有下面的报错,请问 什么原因?我的同事说你们这边已经帮我们开通了2.0了 ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:124 回复:1

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded limit of 1000. 是什么原因呢?

在执行MaxCompute的sql查询时遇到这样的错误:FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded limit of 1000. 什么原因呢? ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:91 回复:1

MaxCompute(原ODPS)默认的压缩格式是什么?

MaxCompute(原 ODPS)默认的压缩格式 什么? ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:81 回复:1

到。意思是 调用sdk时将odps上的表转成dataframe需要把全部数据下载到本地吗?有没有办法不关闭【项目空间数据保护】而将odps上的表全部转成dataframe,在本地写脚本操作?

在本地调用pyodps的sdk时,想将 odps上的表转成dataframe,限制只能得到10000行的dataframe,若使用open_reader函数读取表,则需要关闭【项目空间数据保护】才能读到。意思 调用sdk时将 odps上的表转成 ...
来自: 开发者社区 > 问答 作者: 琴瑟 浏览:282 回复:1

我的账号中,子账号odps是project_tmp这个项目的管理员,想做到该项目下所有的表其他项目不能访问,来做到权限管理。set ProjectProtection=true; 在客户端执行这个

我的账号中,子账号 odps project_tmp这个项目的管理员,想做到该项目下所有的表其他项目不能访问,来做到权限管理。set ProjectProtection=true; 在客户端执行这个语句的时候,报错FAILED: ODPS-0420095 ...
来自: 开发者社区 > 问答 作者: 琴瑟 浏览:567 回复:1

您好,我有一个MaxCompute(原ODPS) mr任务是在前端触发运行的,每次手动触发以后会服务器的odps cmd里执行mr任务,我需要在reduce 的setup中读取一个配置文件,我把这个配置文件作为资源上传到odps之后,是否需要在服务器也存一份该文件。

您好,我有一个MaxCompute(原 ODPS) mr任务 在前端触发运行的,每次手动触发以后会服务器的 odps cmd里执行mr任务,我需要在reduce 的setup中读取一个配置文件,我把这个配置文件作为资源上传到 odps之后,是否需要在服务器也存一份该文件。 ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:205 回复:1

是windows 我的路径是:D:\Program Files\odps\bin,装了jdk1.8

命令 提示:"错误: 找不到或无法加载主类 Files\ odps\bin\..\conf\;D:\Program";环境:用的 windows 我的路径 :D:\Program Files\ odps\bin,装了jdk1.8 ...
来自: 开发者社区 > 问答 作者: 祁同伟 浏览:148 回复:1

MaxCompute SDK中insert偶尔报错,请问什么原因 com.aliyun.odps.OdpsException: ODPS-0110999: Critical

MaxCompute SDK中insert偶尔报错,请问 什么原因com.aliyun. odps.OdpsException:  ODPS-0110999: Critical! Internal error ...
来自: 开发者社区 > 问答 作者: 知与谁同 浏览:383 回复:1
共有30525页 跳转至: GO
产品推荐
大数据计算服务ODPS 云服务器 商标 SSL证书 对象存储 短信服务 负载均衡SLB 全站加速 DCDN
这些文档可能帮助您
什么是MaxCompute 安装并配置客户端 配置Endpoint Java SDK介绍 创建和查看表 Tunnel命令参考

新品推荐

你可能感兴趣

热门推荐

阿里云企典 企典文档内容 阿里云云电脑-无影 行业资讯 云通信网络加速 三维空间重建 系统可信