MongoDB 分片集群介绍
即在moveChunk时，源shard会将迁移的chunk数据进行归档设置，当出现问题时，用于恢复。也就是说，chunk发生迁移时，源节点上的空间并没有释放出来，而目标节点又占用了新的空间。说明 在MongoDB 3.2版本，该配置项默认值为 false，默认不会...
附录：SOFAStack 产品目录
FMT 是一种无侵入的分布式事务解决方案，该模式解决了分布式事务的易用性问题，最大的特点是易于使用、快速接入以及对业务代码无侵入。Saga 模式：Saga 是一种补偿协议，在 Saga 模式下，分布式事务内有多个参与者，每一个参与者都是一个冲...
调优集群性能
如下图所示，某张表是根据a字段进行分布，因为a字段本身比较均匀，所以数据均匀地分布在不同的存储节点上，当您使用了b字段进行分组（group by b），那么存储节点1会将b字段值为b1的数据行分发到计算节点1，为确保计算节点1具有所有b字段值...
数据分析整体趋势
随着AWS，Azure，Alibaba，Google等云厂商的出现，云原生分布式数据仓库成为目前数据分析技术的主要解决方案，代表性云服务包括Amazon Redshift，Snowflake，Alibaba Cloud AnalyticDB，Google BigQuery等。这些云原生数据仓库技术分别起源...
常见问题
only问题的排查与处理方法 集群负载不均问题的分析方法及解决方案 通过手动迁移shard均匀分布热点数据的解决方案 指标含义与异常处理建议 fielddata内存使用率高问题的排查与处理方法 重启变更报错：集群状态不健康或存在close索引，不能...
参与者接入模式
FMT 是一种无侵入的分布式事务解决方案，该模式解决了分布式事务的易用性问题，最大的特点是易于使用、快速接入以及对业务代码无侵入。FMT 模式架构如下：Saga 模式 Saga 模式是 SEATA 提供的长事务解决方案，适用于业务流程长、业务流程多...
功能特性
分布式事务（Distributed Transaction-eXtended，简称 DTX）是蚂蚁集团自主研发的金融级分布式事务中间件，支持跨数据库、跨服务以及混合的方式处理分布式应用，具备多种接入模式和金融级配套功能，本文将主要介绍分布式事务的功能特性。...
表设计
通常来讲，分布式数据库系统中，理想的数据和负载情况是：数据均匀分布，水平方式切分为很多分区，分布在不同机器上，读写压力也水平分散，每个请求的压力仅覆盖局部的一小部分，而不是整体。这种模式下完全水平扩展，业务压力增加，只需要...
数据导入性能优化
当数据分布不均匀时，导入数据较多的一级分区将成为长尾节点，影响整个导入任务的性能，因此要求导入时数据均匀分布。如何选择分布键，请参见 选择分布键。判断分布键合理性：导入前，根据导入数据所选分布键的业务意义判断是否合理。以表...
数据导入性能优化
当数据分布不均匀时，导入数据较多的一级分区将成为长尾节点，影响整个导入任务的性能，因此要求导入时数据均匀分布。如何选择分布键，请参见 选择分布键。判断分布键合理性：导入前，根据导入数据所选分布键的业务意义判断是否合理。以表...
技术面临的挑战与革新
然而share nothing架构对于跨分片的数据访问不是很友好，比如事务，比如全局索引，实现起来十分复杂，效率也要打上折扣，并且因为计算资源和存储资源是绑定的，因此数据几乎是在所有节点上是均匀分布，在集群扩展时，计算和存储要一起扩展...
集群高可用架构推荐配置
节点池高可用配置 您可以基于节点的弹性伸缩、部署集、多AZ，结合K8s调度的拓扑分布约束，确保服务在不同的故障域（failure-domain）资源充足且有所隔离，从而当某一故障域出现问题时，服务仍然可以保持运行，减少单点故障的风险，提高系统...
截图常见问题
本文说明了截图中的常见问题和对应的解决方法。截图失败常见报错 截图任务错误码主要包含SnapshotTimeOut、InvalidParameter.ResourceNotFound、InvalidParameter.ResourceContentBad。错误码获取方式提交截图任务失败可以通过查询截图任务...
Echarts 连续折线图
本文介绍Echarts 连续折线图的图表样式和配置面板的功能。图表样式 配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您需要搜索的配置项名称，快速定位到该配置项，系统支持模糊匹配。详情请参见 搜索资产...
什么是混合云容灾服务
解决的核心问题 混合云容灾解决的核心问题如下：应用级容灾保障业务持续性（Business Continuity）：在数据中心故障或长时间系统维护作业时，在云上快速恢复应用运行，缩短业务停机时间，极大减少损失。数据级容灾：在数据中心备份您的数据...
回切至本地VMware
本文主要介绍如何利用阿里云连续复制型容灾（CDR）服务，在本地虚拟机出现问题后把云上恢复出来的ECS回切到云下VMware环境中。前提条件 已部署CDR网关。更多信息，请参见 步骤三：部署CDR网关。已在被保护的Windows服务器上安装阿里云复制...
全场景解决方案
平滑迁移异构治理 方案架构 双模微服务平台通过 SOFA 微服务和 Service Mesh 微服务，提供了既支持 SOFA 框架又支持 Service Mesh 架构的微服务管理和治理能力,解决用户在技术转型期间与未改造的遗留系统相互之间的打通和过渡问题，帮助...
ECS容灾常见问题
ECS容灾中云盘异步复制和连续复制型容灾的常见问题。ECS容灾云盘异步复制型，支持哪些实例规格？云盘有限制？IP地址有限制吗？在可用地域、可用区、云盘规格、ECS网卡、配置额度均存在限制。支持绝大多数实例规格。仅支持ESSD云盘（不含...
ECS容灾常见问题
ECS容灾中云盘异步复制和连续复制型容灾的常见问题。ECS容灾云盘异步复制型，支持哪些实例规格？云盘有限制？IP地址有限制吗？在可用地域、可用区、云盘规格、ECS网卡、配置额度均存在限制。支持绝大多数实例规格。仅支持ESSD云盘（不含...
流程概览
混合云容灾服务充分利用了公共云资源，极大简化了灾备中心的软硬件准备与运维工作，让您可以只专注...回切至本地VMware 利用阿里云连续复制型容灾（CDR）服务，在本地虚拟机出现问题后把云上恢复出来的ECS回切至云下VMware环境或本地物理机。
PS-SMART多分类
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
PS-SMART回归
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
序言
这些 PaaS 领域平台服务确实解决了许多现实应用问题，降低对底层基础设施的依赖，但业界也产生了困惑-PaaS 产品本身很可能对应用开发和运维产生侵入性，这对厂商来说是粘性，对用户来说可能就是厂商绑定了。直到后来 Kubernetes 等容器编排...
集群负载不均问题的分析方法及解决方案
从结果可以看到查询请求都是普通的term查询，且主日志正常，可以排除ES集群本身出现问题以及存在消耗CPU的查询语句的情况。总结 通过以上分析，可以判断CPU负载不均主要是由于shard分布不均导致的。重新分配分片，确保主shard数与副shard数...
事件中心
网络智能服务 NIS（Network Intelligence Service）事件中心提供主动告警能力，帮助您及时获知风险，查看可能受影响的资源，避免业务受损。应用场景 NIS 事件由...解决事件 查看事件之后，您可以根据相应的建议解决问题，请参见 事件汇总。
PolarDB-X适用场景
分布式快速改造 场景描述 当业务体量即将突破单机数据库承载极限和单表过大导致性能、维护问题时，分布式改造是解决上述问题的高性价比方案。数据库作为分布式改造的重点难点，"和使用单机数据库一样使用分布式数据库"一直是广大用户的核心...
行业趋势与背景
该时代的产品专注解决单机解决不好的分布式扩展性问题，满足分布式数据一致性要求，并支持从单机到分布式的平滑演进，利用云原生技术的优势提供低成本和弹性能力，在交付上具备线上公有云、线下专有云、轻量化等全形态输出。
石墨文档
本文以石墨文档为例，介绍如何借助函数计算毫秒级别的资源伸缩能力，解决计算资源扩容问题，降低服务器成本，提高工作效率。客户介绍 石墨文档 是中国第一款支持云端协作的企业办公服务软件，2014年成立至今，石墨文档已累计为超过20万家...
基于TairString实现高性能分布式锁
如果丢失的数据跟分布式锁有关，则会导致锁的机制出现问题，从而引起业务异常。下文介绍三种保障一致性的方法。使用 红锁（RedLock）红锁是Redis作者提出的一致性解决方案。红锁的本质是一个概率问题：如果一个主从架构的Redis在高可用切换...
集群巡检项及解决方案
Ingress就绪Pod百分比 异常影响：检查Ingress Deployment已就绪的Pod百分比，小于100表明Ingress Pod可能出现问题，无法正常启动或健康检查失败。解决方案：通过Pod诊断或Ingress异常排查文档查找问题Pod。关于异常问题排查，请参见 Nginx ...
典型客户案例
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：需要一个面向分布式架构的开发平台和运行平台，结合...
云监控
云监控为您提供企业级开放型一站式监控解决方案。Hologres已经接入云监控的云服务监控，方便您通过云监控全面了解Hologres实例的资源使用、业务运行及健康状况，及时收到异常报警并做出响应，保证应用程序运行顺畅。本文为您介绍如何通过云...
集群巡检项及解决方案
Ingress就绪Pod百分比 异常影响：检查Ingress Deployment已就绪的Pod百分比，小于100表明Ingress Pod可能出现问题，无法正常启动或健康检查失败。解决方案：通过Pod诊断或Ingress异常排查文档查找问题Pod。关于异常问题排查，请参见 Nginx ...
PolarDB技术内幕
PolarDB 就是在这种背景下出现的，由阿里巴巴自主研发的下一代关系型分布式云原生数据库。在兼容传统数据库生态的同时，突破了传统单机硬件的限制，为用户提供大容量、高性能、高弹性的数据库服务。核心技术之共享存储 PolarDB 采用了共享...
PolarDB PostgreSQL版架构介绍
Storage带来的挑战 架构原理 数据一致性 低延迟复制 Recovery优化 PolarDB PostgreSQL版HTAP架构详解 HTAP架构原理 分布式优化器 算子并行化 消除数据倾斜问题 SQL级别弹性扩展 事务一致性 TPC-H性能：加速比 TPC-H性能：和传统MPP数仓对比...
查看Worker倾斜关系
此时可能出现了计算资源倾斜，Hologres建立了新的系统视图hologres.hg_worker_info，通过此视图可以查询当前数据库Worker、Table Group和Shard之间的关系，便于您判断资源倾斜等关系，解决资源负载不均问题，提高资源利用率。本文为您介绍...
Java应用监控和诊断方案
以淘宝网（www.taobao.com）践行分布式架构与微服务实践的过程为例，遇到的主要挑战有：定位问题难 客服人员接到用户反馈商品购买出现问题后，会交由技术人员排查解决。而微服务分布式架构中的一个网站请求通常要经过多个服务/节点后返回...
Spark常见报错
Spark会使用抽样方法估算表的大小，如果表分布不均匀，估算就会出现错误。您可以将 spark.sql.autoBroadcastJoinThreshold 参数的取值配置为-1，关闭广播特性，从而保障业务可以顺利执行。单位MB。Not enough memory to build and ...
表操作篇
为了防止某一个分区键值的数据成为访问热点造成单机服务能力达到上限，应用程序需要让数据的分布和访问量的分布尽可能均匀。表格存储会对表中的行按主键进行排序，合理设计主键可以让数据在分区上的分布更加均匀，从而能够充分地利用表格...
EDAS直播公告
EDAS解决了基于K8s场景下的应用生命管理问题。EDAS解决了您自主诊断时遇到的痛点，EDAS提供了自动化诊断功能，可以帮助您一键完成故障发现、诊断和治理。EDAS监管控一体化的架构升级，监控方面整合了Prometheus监控、SLS日志和ARMS应用监控...
- 产品推荐
- 这些文档可能帮助您