问答 2019-10-29 来自:开发者社区

Spark使用parquet文件存储格式能带来哪些好处?

Spark使用parquet文件存储格式能带来哪些好处?

问答 2018-12-12 来自:开发者社区

Apache Spark:Kafka以自定义格式编写

$stringUtil.substring( $!{XssContent1.description},200)...

文章 2018-12-06 来自:开发者社区

Spark SQL,如何将 DataFrame 转为 json 格式

$stringUtil.substring( $!{XssContent1.description},200)...

问答 2018-12-05 来自:开发者社区

以json / text格式的Apache Spark DAG可视化

我正在考虑优化一些相当大的Apache Spark作业,并观察到DAG可视化对于特定阶段来说非常复杂。我无法理解外向箭头的位置,各种交叉点和猜测/假设是为了理解它。这是我可以下载DAG的text / json格式的方式,使用vim / text编辑器更容易分析吗?

文章 2017-11-16 来自:开发者社区

总结】spark按文本格式和Lzo格式处理Lzo压缩文件的比较

$stringUtil.substring( $!{XssContent1.description},200)...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注