1. 阿里云>
  2. MaxCompute>
  3. MaxCompute 文档>
  4. MaxCompute 数据 文档>
  5. MaxCompute数据odps文档

MaxCompute数据odps文档

看MaxCompute(原ODPS)说明文档说输入数据只能是表结构 1.是否可以跑用户自定义的原生的基于hdfs的Mapreduce任务,输入为hdfs文件,输出为hdfs文件,mapper的逻辑以及reducer的逻辑用户自定义实现 2.是否支持其他的数据工具,如何跑基于spark的任务
看MaxCompute(原ODPS)说明文档说输入数据只能是表结构1.是否可以跑用户自定义的原生的基于hdfs的Mapreduce任务,输入为hdfs文件,输出为hdfs文件,mapper的逻辑以及reducer的逻辑用户自定义实现2.是否支持其他的数据工具,如何跑基于spark的任务
使用MaxCOmpute python SDK读取ODPS上一张表,做一些处理后,写入另外一张表,读取和写入都是多线程的。遇到问题1. 多线程处理时,每个线程每次循环(每次循环处理100条数据)均新建了一个odps连接,有没有可能是odps连接太多了?文档中没有发现如何关闭这个odps连接? 2. 在ODPS客户端,操作一些sql命令时,也是有超时的,客户端也有超时的话,是不是可以先排除程序的问题?如下: Aliyun ODPS Command Line Tool Version 0.21.1 @Copy
使用MaxCOmpute python SDK读取ODPS上一张表,做一些处理后,写入另外一张表,读取和写入都是多线程的。遇到问题1. 多线程处理时,每个线程每次循环(每次循环处理100条数据)均新建了一个odps连接,有没有可能是odps连接太多了?文档中没有发现如何关闭这个odps连接?2. 在ODPS客户端,操作一些sql命令时,也是有超时的,客户端也有超时的话,是不是可以先排除程序的问题...
1

MaxComputeodps数据相关内容

.MaxCompute使用数据odps .MaxCompute处理数据odps .MaxCompute数据odps客户端 .MaxComputepython数据odps

MaxCompute文档odps相关内容

.MaxComputeodps支持文档 .odps文档mapreduceMaxCompute

MaxCompute数据文档相关内容

.MaxCompute数据文档sql .MaxCompute数据文档操作 .MaxCompute处理数据文档 .MaxCompute说明文档数据 .MaxCompute存储数据文档 .MaxCompute文档输入数据 .MaxCompute文档数据hdfs .MaxCompute文档数据mapper .MaxCompute文档数据reducer .MaxCompute文档数据表结构 .MaxCompute文档数据逻辑 .MaxCompute文档数据任务 .MaxCompute文档数据文件 .MaxCompute文档数据自定义

MaxCompute更多"odps"相关

.MaxCompute报错odps .MaxCompute使用odps .MaxComputeodps支持 .MaxCompute任务odps .MaxComputeodps项目 .MaxCompute原因odps .MaxComputeodps文档 .MaxComputeodps客户端

MaxCompute更多"数据"相关

.MaxCompute大数据数据 .MaxCompute数据计算 .MaxCompute使用数据 .MaxCompute数据表数据 .MaxCompute数据行数据 .MaxCompute数据服务 .MaxCompute数据上传 .MaxCompute同步数据

MaxCompute更多"文档"相关

.MaxCompute数据文档 .MaxComputeodps文档 .MaxCompute文档sql .文档mapreduceMaxCompute .MaxCompute处理文档 .MaxCompute文档任务 .资源文档MaxCompute .MaxCompute文档逻辑

您可能感兴趣

.MaxCompute是什么 .MaxCompute什么 .MaxCompute用户指南 .MaxCompute作用 .MaxCompute计算 .MaxCompute使用 .MaxCompute大数据 .MaxCompute开发
云原生大数据计算服务 MaxCompute
MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库,以 Serverless 架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效的分析处理海量数据。
了解 MaxCompute
控制台
购买包年包月
链接
行业与通用解决方案
最佳实践与客户案例
链接
快速开始
帮助文档
链接
开通按量付费
开通开发者版
链接
MaxCompute 社区
更多阿里云大数据产品
云原生大数据计算服务 MaxCompute
MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库,以 Serverless 架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效的分析处理海量数据。
了解 MaxCompute
控制台
购买包年包月
链接
行业与通用解决方案
最佳实践与客户案例
链接
快速开始
帮助文档
链接
开通按量付费
开通开发者版
链接
MaxCompute 社区
更多阿里云大数据产品
售前咨询
95187转1
专业技术咨询
全方位产品解读
成熟解决方案
成功客户案例分享
支持与服务 公告 帮助文档 自助工具 新手学堂 在线客服 技术工单 我要建议 我要投诉 迁移与部署 运维与管理 优化与提升 服务案例 支持计划
账户管理 管理控制台 备案管理 域名控制台 账号管理 充值付款 线下汇款/电汇 合同申请 索取发票 合规性
快速入口 域名信息查询(WHOIS) 云产品快报 海外上云 客户案例 举报中心 信任中心 产品图标 产品学习路径 阿里云认证 贡献者榜单
资源和社区 开发者社区 开发者学院 公开课 问答 藏经阁 天池平台 阿里云创新中心 阿里云全球培训中心 在线学习 开放实验室 考试认证 高校合作 码上公益
关注阿里云 企业决策必读 企业决策必读 阿里云APP 阿里云APP 阿里云微信 阿里云微信 阿里云微博 阿里云微博 阿里云支持与服务 阿里云支持与服务
热门产品 用户热搜 企业场景 更多推荐
短信服务 云服务器ECS CDN RDS MySQL 版 SSL证书 云数据库 Redis 版 Web应用防火墙 全站加速 专有网络 VPC RDS SQL Server 版 智能语音交互 PolarDB MySQL版 文件存储 (NAS) Elasticsearch 共享带宽 交互式分析 智能对话机器人 企业物联网平台 数据管理 DMS 云原生数据湖分析 全球加速 GA 数据库专属集群 应用身份服务 容器服务 ACK 发票凭证识别 数据库备份DBS 混合云备份 HBR 弹性云桌面 实人认证 商标服务 表格存储 Tablestore 文字识别 视觉计算服务VCS 移动推送 视频点播 Serverless 应用引擎SAE 全局事务服务GTS 消息队列 MQTT 版 AliOS Things 号码隐私保护 大数据计算服务MaxCompute
关于我们 法律声明及隐私权政策 廉正举报 联系我们 加入阿里云
阿里巴巴集团 淘宝网 天猫 聚划算 全球速卖通 阿里巴巴国际交易市场 1688 阿里妈妈 飞猪 阿里云计算 AliOS 阿里通信 万网 高德 UC 友盟 虾米 优酷 钉钉 支付宝 达摩院 阿里安全
© 2009-2022 Aliyun.com 版权所有 增值电信业务经营许可证: 浙B2-20080101
网安 网安浙公网安备 33010602009975号

热门产品

  • 云服务器
  • 域名注册
  • 1分钱API服务
  • 云虚拟主机
  • 切换至电脑版
  • 阿里云APP下载
  • 关于我们

关注我们: 新浪微博 微信

售前咨询:95187转1 阿里云

©2018 Aliyun All rights reserved