云原生大数据计算服务 MaxCompute studio使用心得的相关内容

文章 2019-05-08 来自：开发者社区

MaxCompute Studio使用心得系列7——作业对比

在数据开发过程中，我们通常需要将两个作业进行对比从而定位作业运行性能或者结果有差异的问题，但是对比作业时需要同时打开两个studio 的tab页，或者两个Logview页，不停切换进行对比，使用起来非常的不方便。MaxCompute Studio从3.1.0版本开始支持作业对比，可以在一个页面同时比较两个作业，并且能自动标注出作业的差异点。本文我以查找同个作业执行两次用时差别很大的原因为例，通....

文章 2017-12-21 来自：开发者社区

MaxCompute Studio使用心得系列6——一个工具完成整个Python UDF开发

2017/12/20 北京云栖大会上阿里云MaxCompute发布了最新的功能Python UDF，万众期待的功能终于支持啦，我怎么能不一试为快，今天就分享如何通过Studio进行Python udf开发。前置条件了解到，虽然功能发布，不过还在公测阶段，如果想要使用，还得申请开通：https://page.aliyun.com/form/odps_py/pc/index.htm。这里我就不介....

文章 2017-12-06 来自：开发者社区

MaxCompute Studio使用心得系列5——一个工具完成整个JAVA UDF开发

MaxCompute提供了丰富的内置函数，但是依然还是无法满足所有业务，所以自定义函数在所难免。 MaxCompute目前支持的UDF主要是JAVA UDF，但是原来的客户端console和大数据开发套件都不支持JAVA编辑，只能先在自己机器的java环境中编辑测试好，然后输出jar包，再通过console或大数据开发套件将jar包添加成resource，最后再注册成function。整个过程需....

文章 2017-11-14 来自：开发者社区

MaxCompute Studio使用心得系列4——可视化查看所有job并分析运行情况

在使用MaxCompute的时候，很多同学会关注当前项目有多少任务在执行，哪些任务耗时长，哪些任务已经完成，并且能通过任务的logview来分析任务耗时长的原因。 ofo的同学选择自己搭建任务管理平台通过sdk函数获取MaxCompute 相关job信息进行管理。如《MaxCompute的任务状态和多任务执行》所分享。其他的没有精力自己搭建平台，可以通过show p -all;命令查看所有jo....

文章 2017-11-09 来自：开发者社区

MaxCompute Studio使用心得系列3——可视化分析作业运行

上一篇写分享了通过MaxCompute Studio 编写sql脚本时“编译”功能带来的便捷，这次分享脚本编译好提交运行后，自助查看作业的执行情况。我们很熟悉的是通过logview，去分析作业的执行情况，logview上有很详细的执行日志，而Studio不仅仅提供可视化的信息，还会明确给出一些分析结论如job是有否长尾或数据倾斜情况。比如我写完一个sql脚本，编译成功接着执行脚本，Stu.....

文章 2017-10-30 来自：开发者社区

MaxCompute Studio使用心得系列2——编译SQL脚本

开发人员写好代码，对代码进行语法编译是很常见的操作，但是目前常用的MaxCompute sql开发工具（大数据开发套件和console客户端），都没有该功能，必须把sql脚本提交运行后若有语法问题才会通过返回错误日志中获取相关信息。 MaxCompute每次提交job都要少则几秒多则数分钟不等的排队过程，等返回失败信息，也需要等待一定的时间，不仅仅影响开发效率，还浪费计算资源。本次分享通过M....

文章 2017-10-26 来自：开发者社区

MaxCompute Studio使用心得系列1——本地数据上传下载

MaxCompute Studio已经发布好久，一直没能好好体验，近期MaxCompute Studio 陆续推出很多好用的功能，今天开始给大家分享使用心得。用过大数据开发套件的同学，对于本地数据上传下载，都会遇到这样的问题： ‘导入本地数据’功能，限制本地数据文件大小最大为10MB；查询结果导出本地时，由于select语句返回结果最大为10000行的限制，最多只能导出1W数据；数据导出.....