问答 2024-06-15 来自:开发者社区

DataWorks数据集成报错您尝试读取的文件目录为空

DataWorks数据集成报错您尝试读取的文件目录为空

文章 2024-06-09 来自:开发者社区

DataWorks产品使用合集之在使用数据集成中的同步任务从mysql同步表到oss,存储为csv时,最终生成的文件中没有表头,这个属性可以在哪里配置么

问题一:DataWorks点了增加实例,结果出来的不是教程里面的东西,不知道怎么继续下去? DataWorks点了增加实例,结果出来的不是教程里面的东西,不知道怎么继续下去? ...

DataWorks产品使用合集之在使用数据集成中的同步任务从mysql同步表到oss,存储为csv时,最终生成的文件中没有表头,这个属性可以在哪里配置么

阿里云 DTS是如何做实时数据集成的?

1 课时 |
214 人已学 |
免费
开发者课程背景图
问答 2024-03-19 来自:开发者社区

DataWorks数据集成支持 ftp数据源 zip 文件,但是有解压密码的文件 的 数据集成吗?

DataWorks数据集成支持 ftp数据源 zip 文件,但是有解压密码的文件 的 数据集成吗?

问答 2024-02-25 来自:开发者社区

DataWorks中mc使用数据集成同步oss的时候出现了表明和oss文件名不一致的问题,多了后缀?

DataWorks中mc使用数据集成同步oss的时候出现了表明和oss文件名不一致的问题,多了后缀?

文章 2024-01-09 来自:开发者社区

DataX定时执行json脚本文件

1.创建编写 DataX 数据同步任务执行的 shell 脚本创建编写 DataX 数据同步任务执行的 shell 脚本[root@VM-12-14-centos ~]# vim /usr/local/dataX/bin/pg-mysql.sh#!/bin/bash . /etc/profile touch /usr/local/dataX/log/pg-mysql/pg-mysql.log n....

文章 2023-11-13 来自:开发者社区

开源DataX最新版本v202309新增HdfsReader支持parquet文件格式的问题

hive版本 : hive3hdfs版本 : 3.1.5场景 :使用hive建表语句在建表时指定文件存储格式为parquet,压缩格式为snappy;ds调度上新建任务,datax节点下配置文件中设置参数 "fileType": "PARQUET",运行任务提示以下错误,查阅datax的使用文档也并未找到新版...

问答 2023-09-12 来自:开发者社区

DataWorks使用数据集成生成CSV文件,为什么后面跟了一长串呢?

DataWorks使用数据集成生成CSV文件,为什么后面跟了一长串呢?怎么去掉随机的后缀只能在脚本模式下才能修改singleFileOutput 参数吗,,,导航模式不行?

问答 2023-08-16 来自:开发者社区

DataWorks数据集成至oss 如何取消文件随机后缀是什么?

DataWorks数据集成至oss 如何取消文件随机后缀是什么?

问答 2023-08-08 来自:开发者社区

DataWorks中我想在datax同步文件数据的时候,插入一列时间值,应该怎么写呢?

DataWorks中我想在datax同步文件数据的时候,插入一列时间值,应该怎么写呢?oss 中parquet文件

文章 2023-05-25 来自:开发者社区

DataX 中需要在 JSON 文件中配置多个任务

DataX 中需要在 JSON 文件中配置多个任务,可选的JSON配置文件类型有:job、jobfile、stream 等。 如果想为 DataX 启动多个同时运行的任务,可以考虑使用 stream 类型的配置文件。 在 stream 类型配置文件中,可以设置多个作业流,每个作业流配置一个DataX任务。可以简单理解为...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注