文章 2024-10-14 来自:开发者社区

大数据-96 Spark 集群 SparkSQL Scala编写SQL操作SparkSQL的数据源:JSON、CSV、JDBC、Hive

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-96 Spark 集群 SparkSQL Scala编写SQL操作SparkSQL的数据源:JSON、CSV、JDBC、Hive
文章 2024-10-13 来自:开发者社区

Hadoop-24 Sqoop迁移 MySQL到Hive 与 Hive到MySQL SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce

章节内容 上节我们完成了如下的内容: Sqoop 部分导入数据 --query Sqoop 部分导入数据 --where 记录执行过程和执行结果 背景介绍 这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。 之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝...

Hadoop-24 Sqoop迁移 MySQL到Hive 与 Hive到MySQL SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce
文章 2024-10-13 来自:开发者社区

Hadoop-23 Sqoop 数据MySQL到HDFS(部分) SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce

章节内容 上一节我们完成了如下的内容: 编写一个 SQL 脚本生成数据 启动我们的依赖服务:HDFS、Hive、YARN Sqoop 将数据 全量 导入 Hive 查看MapReduce状态、查看HDFS结果 背景介绍 这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。 之前已经在 VM 虚...

Hadoop-23 Sqoop 数据MySQL到HDFS(部分) SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce
文章 2024-10-13 来自:开发者社区

Hadoop-22 Sqoop 数据MySQL到HDFS(全量) SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce

章节内容 上节我们完成了: Sqoop 介绍 Sqoop 下载配置环境等 Sqoop 环境依赖:Hadoop、Hive、JDBC 等环境补全 背景介绍 这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。 之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在...

Hadoop-22 Sqoop 数据MySQL到HDFS(全量) SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce
文章 2024-07-29 来自:开发者社区

云原生数据仓库使用问题之控制JDBC方式请求的SQL大小限制的参数是什么

问题一:云数据仓库ADB慢查询表中,shuffle_size 该列表示什么,是哪一部分的shuffl ? 云数据仓库ADB中,慢sql查询是什么? 参考答案: 慢SQL查询通常是指执行耗时长、消耗资源多的SQL语句,常见的资源消耗包括CPU、内存和磁盘I/O。以下是对阿里云ADB数据库中几种典型慢查询及其成因分析: 消耗CPU的慢查询原因可能包...

云原生数据仓库使用问题之控制JDBC方式请求的SQL大小限制的参数是什么
文章 2024-07-10 来自:开发者社区

Java面试题:描述JDBC的工作原理,包括连接数据库、执行SQL语句等步骤。

JDBC(Java Database Connectivity,Java数据库连接)是一个面向对象的应用程序接口(API),用于连接数据库和执行SQL语句。以下是JDBC的基本工作原理及连接数据库和执行SQL语句的主要步骤: 加载和注册JDBC驱动 首先,JDBC需要加载数据库的驱动程序。这个驱动是一个实现了JDBC接口的类库,它负责和特定的数据库进行通信。加载驱动通常...

文章 2024-06-24 来自:开发者社区

Java与数据库连接技术JDBC关键核心之PreparedStatement以及SQL注入演示解决和原理

PreparedStatement SQL注入 执行预编译的SQL对象 ...

Java与数据库连接技术JDBC关键核心之PreparedStatement以及SQL注入演示解决和原理
文章 2024-06-24 来自:开发者社区

后端数据库开发JDBC编程Mybatis之用基于XML文件的方式映射SQL语句实操

之前的SQL语句是基于注解 以后开发中一般是一个接口对应一个映射文件 ...

后端数据库开发JDBC编程Mybatis之用基于XML文件的方式映射SQL语句实操
问答 2024-06-16 来自:开发者社区

在Flink CDC中jdbc sink的sql要提请定义好,能不能根据数据源动态生成?

在Flink CDC中jdbc sink的sql要提请定义好,能不能根据数据源动态生成?

问答 2024-06-11 来自:开发者社区

E-MapReduce通过hive jdbc方式向集群提交多条不同类型的sql任务会偶发报错 ...

E-MapReduce通过hive jdbc方式向集群提交多条不同类型的sql任务会偶发报错 Caused by: org.apache.thrift.transport.TTransportException: java.net.SocketException: Broken pipe (Write failed)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据库

分享数据库前沿,解构实战干货,推动数据库技术变革

+关注