文章 2023-10-12 来自:开发者社区

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门

1. Apache Hive 概述分布式SQL计算定义以分布式的形式,执行SQL语句,进行数据统计分析Apache Hive功能将SQL语句翻译成MapReduce程序,提供用户分布式SQL计算能力2. 模拟实现Hive功能元数据管理SQL解析器3. Hive基础架构元数据管理SQL解析器:完成SQL解析、执行优化、代码提交等功能用户接口:提供用户和Hive交互的功能4. Hive部署4.1 规....

黑马程序员-大数据入门到实战-分布式SQL计算 Hive 入门
文章 2023-09-16 来自:开发者社区

大数据Spark分布式SQL引擎

1 Spark SQL CLI回顾一下,如何使用Hive进行数据分析的,提供哪些方式交互分析???方式一:交互式命令行(CLI)1.bin/hive,编写SQL语句及DDL语句方式二:启动服务HiveServer2(Hive ThriftServer2)1.将Hive当做一个服务启动(类似MySQL数据库,启动一个服务),端口为100002.1)、交互式命令行,bin/beeline,CDH 版....

大数据Spark分布式SQL引擎
文章 2023-09-16 来自:开发者社区

大数据Spark SQL快速入门

1 SparkSession 应用入口Spark 2.0开始,应用程序入口为SparkSession,加载不同数据源的数据,封装到DataFrame/Dataset集合数据结构中,使得编程更加简单,程序运行更加快速高效。个人总结:从RDD就相当于一个集合列表,然后到DS,DF就有了表的概念,然后有SQL对表进行操作.SparkSession:这是一个新入口,取代了原本的SQLContextAPI....

大数据Spark SQL快速入门
问答 2023-08-07 来自:开发者社区

大数据计算MaxCompute的sql 经过java replace处理 或者拼接 运行报错 ?

大数据计算MaxCompute的sql 经过java replace处理 或者拼接 运行报错 ?

问答 2023-07-31 来自:开发者社区

大数据计算MaxCompute 中datawords可以支持导出开发的sql文件吗?

大数据计算MaxCompute 中datawords可以支持导出开发的sql文件吗?

问答 2023-07-31 来自:开发者社区

大数据计算MaxCompute sql 节点参数是 一个简短的sql 无法运行吗 直接报错了?

大数据计算MaxCompute sql 节点参数是 一个简短的sql 无法运行吗 直接报错了?

问答 2023-07-30 来自:开发者社区

大数据计算MaxCompute现在我不太理解这个,因为之前都是在datawork写sql,创建新表?

问题1:大数据计算MaxCompute现在我不太理解这个,因为之前都是在datawork写sql,创建新表,查询表再插入数据的?问题2:那是项目名称algadm或algadm_dev,我这个怎么看有没有odpscmd

问答 2023-07-30 来自:开发者社区

你好,大数据计算MaxCompute这个报错的编号我没找到,MaxCompute支持sql解析?

你好,大数据计算MaxCompute这个报错的编号我没找到,FAILED: ODPS-0130121:[26,39] Invalid argument type - invalid type FUNCTION(VOID=>VOID) of argument 1 for function JSON_EXTRACT, expect JSONODPS-0130071:[25,17] Semanti...

问答 2023-07-30 来自:开发者社区

請問大数据计算MaxCompute pyodps中o.execute_sql如何获取所执行的sql?

請問大数据计算MaxCompute pyodps中o.execute_sql如何获取所执行的sql的日志?

问答 2023-07-25 来自:开发者社区

大数据计算MaxCompute这个报错是什么原因?执行自定义sql function出现的,

ODPS-0010000:System internal error - java.util.NoSuchElementException at java.util.ArrayDeque.removeFirst(ArrayDeque.java:285) at java.util.ArrayDeque.pop(ArrayDeque.java:522) at com.aliyun....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据库

分享数据库前沿,解构实战干货,推动数据库技术变革

+关注