文章 2024-11-25 来自:开发者社区

【大数据分析&机器学习】分布式机器学习

  机器学习方法是计算机利用已有的数据生成某种模型,并利用此模型预测的一种方法。在确定模型结构之后,根据已知模型寻找模型参数的过程就是训练,训练过程中不断依据训练数据来迭代调整模型的参数值,从而使模型的预测结果更为准确。在现实应用中,要达到好的效果,训练数据集可能很大,模型参数量剧增,...

【大数据分析&机器学习】分布式机器学习
阿里云文档 2024-09-23

在TDX实例中基于BigDL PPML构建全链路安全的分布式Spark大数据分析应用

本文介绍在基于Intel® TDX安全特性的g8i实例中,使用BigDL PPML解决方案运行分布式的全链路安全的Spark大数据分析应用。

阿里云文档 2024-09-18

分析和解决慢SQL的方法

本文介绍了分析和解决慢SQL的方法。

阿里云文档 2023-12-01

如何使用PolarDB-X空间分析功能

PolarDB-X空间分析功能支持查看实例的空间使用概况、空间剩余可用天数,以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等。本文介绍如何使用PolarDB-X空间分析功能。

阿里云文档 2023-09-03

如何通过端云互联请求服务调用链路和参数分析_企业级分布式应用服务(EDAS)

本文介绍通过端云互联请求服务调用链路和参数分析,有效地提高问题排查效率。

阿里云文档 2023-07-20

锁分析的具体操作步骤

本文介绍了锁分析的具体操作步骤。

文章 2021-11-07 来自:开发者社区

大数据分析-常见分布式OLAP查询引擎研究

大数据查询分析-分布式OLAP查询引擎设计Bigdata OLAP Product= Cube + OLAP(QueryParser+QueryOptimizer+QueryEngine) + FileSystem(HDFS/GFS/S3)OLAPTypeLinkDescMondrianROLAPhttp://mondrian.pentaho.com/documentation/architec....

大数据分析-常见分布式OLAP查询引擎研究
文章 2017-11-16 来自:开发者社区

大数据分析需要分布式计算架构

我们说大数据分析,说云计算,都少不了分布式计算技术。因为要实现大规模的计算和数据分析,一台服务器肯定是不够的,你也不能简单地将不同功能模块分布到不同的机器上运行,这充其量也只能叫做scale-up,但是最终你一定需要scale-out,这才是真正的分布式计算,或者叫并行计算。 DeveloperWorks上今天刊载了一篇文章,展示了ZooKeeper这个分布式计算调度器的力量。这个Yahoo共享....

文章 2017-11-15 来自:开发者社区

Druid:一个用于大数据实时处理的开源分布式系统——大数据实时查询和分析的高容错、高性能开源分布式系统

转自:http://www.36dsj.com/archives/28590 Druid 是一个用于大数据实时查询和分析的高容错、高性能开源分布式系统,旨在快速处理大规模的数据,并能够实现快速查询和分析。尤其是当发生代码部署、机器故障以及其他产品系统遇到宕机等情况时,Druid仍能够保持100%正常运行。创建Druid的最初意图主要是为了解决查询延迟问题,当时试图使用Hadoop来实现交互式查询....

文章 2017-05-22 来自:开发者社区

颠覆大数据分析之Spark弹性分布式数据集

Spark中迭代式机器学习算法的数据流可以通过图2.3来进行理解。将它和图2.1中Hadoop MR的迭代式机器学习的数据流比较一下。你会发现在Hadoop MR中每次迭代都会涉及HDFS的读写,而在Spark中则要简单得多。它仅需从HDFS到Spark中的分布式共享对象空间的一次读入——从HDFS文件中创建RDD。RDD可以重用,在机器学习的各个迭代中它都会驻留在内存里,这样能显著地提...

颠覆大数据分析之Spark弹性分布式数据集

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注