云原生大数据计算服务 MaxCompute优化的相关内容

文章 2023-05-15 来自：开发者社区

大数据开发基础的数据库基础的SQL语句优化

使用索引索引是用来提高数据库查询效率的一种技术。使用索引可以减少数据的扫描次数，从而提高查询效率。在设计表结构时，应该为经常被查询的字段添加索引。避免使用子查询子查询是查询中嵌套的另一个查询，在处理大量数据时会极大地影响查询效率。因此，应该尽量避免使用子查询，可以考虑使用联合查询或者临时表等方法代替子查询。减少数据传输量在查询时，应该尽可能避免返回不必要的字段和数据，以减少数据传输量和查询时间。....

问答 2023-04-24 来自：开发者社区

OTS数据导出至ODPS，速度太慢，可以怎么优化？

文章 2023-02-21 来自：开发者社区

前端较大数据传输优化方案（下）

前言上一节我们针对前端较大数据传输所造成的页面响应缓慢的问题，使用了分片的思路进行优化处理，但是由于分片会对字节码进行截取，导致了在文本解析的过程中在截取位置出现了乱码的问题，本节将针对这一问题，做进一步的优化，不废话马上开始参考代码为了保障字符能够正常解析，我们需要找到一个特殊的值来对字节数组进行截取，说实话这个特殊值是我看了相关的代码反推出来的，先看下完整的代码async function ....

文章 2023-02-21 来自：开发者社区

前端较大数据传输优化方案（上）

前言今天刷抖音看到一个与前端海量数据下载优化相关的问题（在大数据资源请求的时候，前端如果等待所有数据加载完，那么页面从请求到最终呈现内容，会有很长一段的空白期，如何优化响应速度呢，这就需要我们对响应数据做切片处理了），刚好学习了顺便对客户端请求数据的相关知识简单做了下总结复习关于 Fetchmdn文档：使用 Fetch - Web API 接口参考 | MDN (mozilla.org)Fetc....

文章 2023-02-18 来自：开发者社区

以小博大外小内大,Db数据库SQL优化之小数据驱动大数据

SQL优化中，有一条放之四海而皆准的既定方针，那就是：永远以小数据驱动大数据。其本质其实就是以小的数据样本作为驱动查询能够优化查询效率，在SQL中，涉及到不同表数据的连接、转移、或者合并，这些操作必须得有个数据集作为“带头”大哥，即驱动数据，而这个驱动数据最好是数据量最小的那一个。内大外小在讨论数据库之前，日常开发中，我们经常会遇到数据样本数量不一致，但是需要进行检索的情况，比如某人在地铁的某节....

文章 2023-02-01 来自：开发者社区

大数据分析之纳税人画像-实现和优化思路

1.背景环境本文章来自最近做的项目模块的思考和总结，主要讲思路不涉及过多的基础和实现细节。需求：统计出来纳税人名称、行业、近一年业务量（办税服务厅、电子税务局、自助渠道），近一年业务量top5(办税服务厅、电子税务局、自助渠道)、近一年纳税金额、近一年申报数、近一年用票数。支持根据所属税务机关分页查询。看上去业务不复杂，但是**数据来自多个系统，数据量很大。**来来画个示意图展示下数据来源的复杂....