问答 2025-02-08 来自:开发者社区

如何将py文件资源传入ODPS DataFrame的map/apply方法的resources参数?

1、使用场景:在PyODPS3节点中使用了DataFrame的map和apply方法,编写自定义函数,传入一个collection资源和一个py文件资源,并在自定义函数中使用collection和py文件资源中的函数进行数据处理。2、问题:通过map/apply方法的resources参数,可以传入collection资源和py文件资源,目前传入collection资源没有问题,但是如何正确传入....

问答 2024-06-15 来自:开发者社区

PyODPS的DataFrame中的map或者apply结合lambda如何实现传入多列参数

PyODPS的DataFrame中的map或者apply结合lambda如何实现传入多列参数

问答 2023-08-20 来自:开发者社区

大数据计算MaxCompute DataFrame在调用完join后调用map_reduce会报?

大数据计算MaxCompute DataFrame在调用完join后调用map_reduce会报 AttributeError: 'InnerJoin' object has no attribute 'input' 的错误,在join后使用to_pandas(wrap=True)转换为odps DataFrame可以解决这个问题,但是好像会因为这个导致本地内存占用过高,请问有什么解决办法吗?

文章 2022-06-13 来自:开发者社区

DataFrame(11):数据转换——map()函数的使用

1、map()函数1)map()函数作用  将序列中的每一个元素,输入函数,最后将映射后的每个值返回合并,得到一个迭代器。2)map()函数原理图原理解释:  上图有一个列表,元素分别是从1-9。map()函数的作用就是,依次从这个列表中取出每一个元素,然后放到f(x)函数中,最终得到一个通过函数映射后的结果。 3)map()内置函数和Series的map()方法①....

DataFrame(11):数据转换——map()函数的使用
问答 2022-02-15 来自:开发者社区

如何有效地将DataFrame转换为(列名称 - >列值列表)的Map

我想要实现的是,对于以下DataFrame: | FOO | BAR | BAZ || lorem | ipsum | dolor || sit | amet | dolor | | lorem | lorem | dolor | 生成以下输出: Map( FOO -> List("lorem", "sit"), BAR -> List("ipsum", "amet", "l...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。