部署云原生大数据计算服务 MaxCompute 的相关内容

问答 2022-09-10 来自：开发者社区

部署在微软云上的应用，用JDBC不能连MaxCompute吗

问答 2022-08-20 来自：开发者社区

spark任务想完整的部署，发布，执行调度，仅仅maxcompute组件权限够么，还需要datawo

spark任务想完整的部署，发布，执行调度，仅仅maxcompute组件权限够么，还需要dataworks权限么？遇到2个现场，一个只有dataworks组件，一个只有maxcompute组件

文章 2022-08-12 来自：开发者社区

基于Hadoop部署实践对网站日志分析（大数据分析案例）（三）

3.6 使用Sqoop将hive分析结果表导入mysql 3.6.1 创建mysql表mysql -u root -p（启动MySQL，需要输入密码，不显示）create database whw;（创建数据库）创建一个表格create table whw_logs_stat(logdate varchar(10) primary key,pv int,reguser int,ip int,ju....

文章 2022-08-12 来自：开发者社区

基于Hadoop部署实践对网站日志分析（大数据分析案例）（二）

3.4 根据结果文件结构建立hive数据库表 3.4.1在结果文件上创建分区表 - 表名（techbbs） - 表类型（External） - 表字段字段名字段类型描述 ip strin....

文章 2022-08-12 来自：开发者社区

基于Hadoop部署实践对网站日志分析（大数据分析案例）（一）

实践项目所需资料hive安装手册（如果需要本项目的Hadoop集群压缩包（包含所有组件，免去安装部署），可以私信博主，解压可使用！）hive安装资料手册.rar-Hadoop文档类资源-CSDN下载日志数据文件：大数据分析-网站日志数据文件（Hadoop部署分析资料）-Hadoop文档类资源-CSDN下载预处理MapReduce代码（python）hadoop实训课数据清洗py脚本（MapRed....

文章 2022-08-08 来自：开发者社区

ECS集群部署大数据环境

本参考文档使用4节点机器集群进行部署，操作用户为root·部署Hadoop环境一、机器初始化1，绑定机器的网卡和硬盘（此步骤只针对未绑定网卡和硬盘的erdma机器，大部分机器开出来网卡和硬盘是绑定的）查看如图即为绑定成功。申请到ecs机器后，需绑定机器的网卡和硬盘。具体步骤如下：绑定与解绑 rdma 网卡脚本：bind() { echo $1 > /sys/bus/pci/driv...

文章 2022-06-13 来自：开发者社区

基于Docker一键部署整个大数据平台及其他微服务架构

随着大数据平台型产品方向的深入应用实践和Docker开源社区的逐渐成熟，业界有不少的大数据研发团队开始拥抱Docker。简单来说，Docker会让Hadoop平台部署更加简单快捷、让研发和测试团队集成交付更加敏捷高效、让产线环境的运维更加有质量保障。基于 Docker 可以实现 CaaS（Containers as a Service）微服务架构，一般一个应用程序会提供多个服务，包括内部服务和外....

问答 2022-05-12 来自：开发者社区

应用部署在K8s 及 Docker中会影响性能吗？大数据处理相关的任务是否建议部署到 K8s中？

应用部署在 K8s 及 Docker 中会影响性能吗？例如大数据处理相关的任务是否建议部署到 K8s 中？

文章 2022-02-17 来自：开发者社区

小打卡：快速部署大数据计算平台实践

一、业务背景小打卡致力于帮助用户成为更好的自己。目前，已为3000万用户提供体验服务3.4亿人次，内容消费7.4亿人次。在小打卡上线初期，业务分析所需的数据主要是通过查询mysql库表。现在，小打卡的主要业务分析需求，包括业务报表，用户行为分析，A/B/n实验评估，个性化推荐，数据服务等全部是借助于阿里云的大数据平台来满足。选择阿里云大数据产品的原因：1、成本低享用阿里云超大规模的云计算资源....

文章 2022-02-17 来自：开发者社区

2B场景，快速部署贴近实际生产的大数据基础平台探索

2B场景，快速部署贴近实际生产的大数据基础平台探索 Table of Contents 1. 现状与思考 1.1. 背景介绍 1.2 例子 1.2.1 hdfs docker化 1.2.2 yarn等资源调度的引入 1.2.3 代码盘点 1.2.4 项目上线 1.3 有待完善的事情 1.3.1 管理问题 1.3.2 部署 1.3.3 安全与运营 1.4 小结 2 尝试...