云原生大数据计算服务 MaxCompute python 的相关内容

问答 2017-05-19 来自：开发者社区

使用MaxCOmpute python SDK读取ODPS上一张表，做一些处理后，写入另外一张表，读取和写入都是多线程的。遇到问题1. 多线程处理时，每个线程每次循环（每次循环处理100条数据）均新建了一个odps连接，有没有可能是odps连接太多了？文档中没有发现如何关闭这个odps连接？ 2. 在ODPS客户端，操作一些sql命令时，也是有超时的，客户端也有超时的话，是不是可以先排除程序的问题？如下： Aliyun ODPS Command Line Tool Version 0.21.1 @Copy

使用MaxCOmpute python SDK读取ODPS上一张表，做一些处理后，写入另外一张表，读取和写入都是多线程的。遇到问题1. 多线程处理时，每个线程每次循环（每次循环处理100条数据）均新建了一个odps连接，有没有可能是odps连接太多了？文档中没有发现如何关闭这个odps连接？2. 在ODPS客户端，操作一些sql命令时，也是有超时的，客户端也有超时的话...

问答 2017-05-19 来自：开发者社区

在maxCompute的大数据开发套件的服务中，UDF 能不能支持python写的脚本？

文章 2017-05-07 来自：开发者社区

使用python fabric搭建RHEL 7.2大数据基础环境以及部分优化

1.使用python fabric进行Linux基础配置使用python，可以让任何事情高效起来，包括运维工作，fabric正式这样一套基于python2的类库，它执行本地或远程shell命令提供了操作的基本套件（正常或通过sudo）和上传/下载文件，如提示用户输入运行辅助功能，或中止执行。用Python3开发的部署工具叫fabric3：fabric3，和fabric一样最大特点是不用登...

文章 2017-05-02 来自：开发者社区

我为什么说 Python 是大数据全栈式开发语言

前段时间，ThoughtWorks在深圳举办一次社区活动上，有一个演讲主题叫做“Fullstack JavaScript”，是关于用JavaScript进行前端、服务器端，甚至数据库（MongoDB）开发，一个Web应用开发人员，只需要学会一门语言，就可以实现整个应用。受此启发，我发现Python可以称为大数据全栈式开发语言。因为Python在云基础设施，DevOps，大数据处理等领域都是炙.....

文章 2017-05-02 来自：开发者社区

《Python和HDF 5大数据应用》——第1章简介 1.1 Python和HDF5

本节书摘来自异步社区《Python和HDF 5大数据应用》一书中的第1章，第1.1节，作者［美］Andrew Collette（科莱特），胡世杰译，更多章节内容可以访问云栖社区“异步社区”公众号查看。第1章简介我刚毕业那会遇到过一个严重的问题——一部国家公认的等离子体研究设备花了整整一周时间收集的上千万个数据的值不太对劲。比正常情况小了约40个数量级。我跟我的咨询师挤在他的办公室，在....

文章 2017-05-02 来自：开发者社区

《Python金融大数据分析》一2.1　Python部署

本节书摘来异步社区《Python金融大数据分析》一书中的第2章，第2.1节，作者：【德】Yves Hilpisch（伊夫希尔皮斯科）译者：姚军责编：傅道坤，更多章节内容可以访问云栖社区“异步社区”公众号查看。 2.1　Python部署本节说明如何在本地（或者服务器上）以及通过Web浏览器部署Python。 2.1.1　Anaconda 有些操作系统自带某个版本的Python并且已经安....

文章 2017-05-02 来自：开发者社区

《Python金融大数据分析》一1.3　用于金融的Python

本节书摘来异步社区《Python金融大数据分析》一书中的第1章，第1.3节，作者：【德】Yves Hilpisch（伊夫希尔皮斯科）译者：姚军责编：傅道坤，更多章节内容可以访问云栖社区“异步社区”公众号查看。 1.3　用于金融的Python 前一小节介绍了科技在金融中发挥作用的一些领域：金融行业中的科技成本；作为新业务和创新业务引擎的科技；作为金融行业进入门槛的科技；不断提升.....

文章 2017-05-02 来自：开发者社区

《Python金融大数据分析》一第1章为什么将Python用于金融

本节书摘来异步社区《Python金融大数据分析》一书中的第1章，作者：【德】Yves Hilpisch（伊夫希尔皮斯科）译者：姚军责编：傅道坤，更多章节内容可以访问云栖社区“异步社区”公众号查看。第1章为什么将Python用于金融 Python金融大数据分析银行本质上是技术公司 ——Hugo Banzige

文章 2017-05-02 来自：开发者社区

《Python金融大数据分析》一第1部分 Python与金融

本节书摘来异步社区《Python金融大数据分析》一书中的第1部分 Python与金融，作者：【德】Yves Hilpisch（伊夫希尔皮斯科）译者：姚军责编：傅道坤，更多章节内容可以访问云栖社区“异步社区”公众号查看。第1部分 Python与金融 Python金融大数据分析本部分介绍Python的金融学应用，包括3章。第1章简短地讨论Python的总体情况，证明Python确实适.....

文章 2017-05-02 来自：开发者社区

《Python和HDF 5大数据应用》——导读

前言过去的几年里，Python已经和IDL或MATLAB一样，成为科学分析领域值得信赖的选择。它拥有稳健的核心模块，可用于处理数值数组（NumPy）、分析 SciPy）以及绘图（matplotlib），同时还拥有十分丰富的专用模块。它能帮助人们减少编写科学代码的工作量，同时还能提高计算结果的质量。已经有越来越多的人将Python用于大型数值数据集处理，使用标准格式来进行数据的存储和通信也显....