UDF开发（Python3）
返回值为Generator类型，调用者通过遍历获取表的内容，每次遍历得到的是以数组形式存在的表中的一条记录。引用表资源示例如下。from odps.udf import annotate from odps.distcache import get_cache_table@annotate('->string')class ...
XML函数
xmlelement-<foo bar="2007-01-26">content不是合法XML名字的元素名和属性名将被逃逸，逃逸的方法是将违反的字符用序列_x``HHHH``_替换，其中 HHHH 是被替换字符的Unicode代码点的十六进制表示。例如：SELECT xmlelement(name"foo$bar",...
性能说明FAQ
原因分析 执行目录遍历操作时，如果此目录同时正在被修改（如创建、删除、重命名文件），目录遍历会由于缓存频繁失效而响应非常慢。对大目录执行目录遍历操作时，目录遍历会由于缓存淘汰而响应非常慢。解决方案 避免目录体量过大，控制单...
PolarDB HTAP实时数据分析技术解密
Plan转换的方法简单，只需要遍历执行计划树，将MySQL优化后的AST转换成IMCI中以relation operator为节点的树状结构即可。在这个过程中，会做一部分额外的动作。例如，类型的隐式转换。兼顾行列混合执行的优化器 存在行存和列存两套执行引擎...
表
前提条件：准备运行环境 PyODPS支持在DataWorks的PyODPS节点或本地PC环境中运行，运行前您需先选择运行工具并准备好运行环境。使用DataWorks：创建好PyODPS 2节点或PyODPS 3节点，详情请参见 通过DataWorks使用PyODPS。使用本地PC环境：...
Steps O-T
by()修饰，用于指定排序规则以及升序 incr/降序 decr/乱序 shuffle 默认按照自身值进行排序，排序规则支持指定字段值和子遍历。默认为升序 支持通过多个 by()指定多个排序规则 单步会隐式插入 barrier()/按照pk升序，pk相同则按照sk降序 g...
SearchMedia-搜索媒体信息
接口说明 获取命中数据条数限制说明如下：方法一：分页遍历 对于命中的搜索结果，您可以通过设置分页参数“PageNo”（页码）和“PageSize”（每页显示的记录数）来逐步遍历最多 5000 条数据。如果搜索结果超出了 5000 条，为了保证有效地遍...
for-each节点逻辑原理介绍
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文为您介绍for-each节点的组成与应用逻辑。使用说明 您可通过以下内容了解遍历...
Steps A-G
aggregate 功能：（sideEffect）在遍历过程中，将输入objects聚合成一个list，并保存在sideEffect。备注：单步不会影响输入objects，下一个单步仍然以objects作为输入。单步生成的list是只读的，在后续遍历的任意位置可以通过 cap()取值。...
列举文件
本文介绍如何列举指定存储空间下（Bucket）的所有文件（Object）、指定个数的文件、指定前缀的文件等。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。...
多值子列语法
id|user_id|city|tags|brands|+-+-+-+-+-+|1|1|HZ|A,B,C|X:80,Y:70|+-+-+-+-+-+1 row in set(0.02 sec)注意事项 多值列的GROUP BY一定要带WHERE条件，否则引擎底层需要遍历所有的value（默认只遍历1024个value）。多个子列之间的组合筛选是...
自定义构建应用阶段
是否遍历子目录 用于设置在上传构建产物时，是否遍历指定目录的所有子目录。文件后缀 用于设置文件后缀，上传指定文件类型的构建产品。如设置多个后缀，用“,”分隔。是否公开 用于设置构建产物上传完成后，是否所有人可访问读取。说明 如...
iOS端集成
不传时表示第一页,遍历时服务端会返回下一页Token，客户端获取下一页时应带上 req.pageSize=10;req.sortType=AliVCIMSortType_ASC;[[[AliVCIMEngine sharedEngine]getGroupManager]listGroupUser:req completed:^(AliVCIMListGroupUserRsp*...
图解MySQL 8.0优化器查询解析篇
第一遍会跳过包含table function的表，第二遍专门再对包含table function的表执行一遍上述逻辑。这里的考虑应该是先resolve了外部环境（相对于table function），因为有可能函数参数会依赖外部的derived table。trace_derived.add_utf8_...
WAF目录遍历误拦截
问题描述 WAF报目录遍历误拦截。解决方案 目录遍历防护，如果出现误拦截，客户端IP在指定的 检测时间范围 内发起的 请求总次数超过 指定数量 且404响应码占比超过 指定比例。自动封禁在短时间内发起多次目录遍历攻击的客户端IP。如果用户...
分片上传
遍历所有分片。var parts=listPartsResult.Parts;foreach(var part in parts){ Console.WriteLine("partNumber:{0},ETag:{1},Size:{2}",part.PartNumber,part.ETag,part.Size);} nextMarker=listPartsResult.NextPartNumberMarker;} while...
高维向量检索（PASE）
IVFADC通过积量化来避免遍历计算，但是会导致精度损失，而IVFFlat是暴力计算，避免精度损失，并且计算量可控。HNSW算法 HNSW（Hierarchical Navigable Small World）算法适合超大规模的向量数据集（千万级别以上），并且对查询延时有严格...
高维向量检索（PASE）
IVFADC通过积量化来避免遍历计算，但是会导致精度损失，而IVFFlat是暴力计算，避免精度损失，并且计算量可控。HNSW算法 HNSW（Hierarchical Navigable Small World）算法适合超大规模的向量数据集（千万级别以上），并且对查询延时有严格...
高效向量检索（PASE）
IVFADC通过积量化来避免遍历计算，但是会导致精度损失，而IVFFlat是暴力计算，避免精度损失，并且计算量可控。HNSW算法 HNSW（Hierarchical Navigable Small World）算法适合超大规模的向量数据集（千万级别以上），并且对查询延时有严格...
GetVideoList-获取音视频信息列表
若需要查询更多音视频，甚至遍历所有音视频信息，请参见 搜索媒体信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权...
数据序列化和持久化
T*字符串，每个元素为字符类型 元素字符用 utf-8 编码 先入以 LEB128 编码的 uint32 表达元素个数，然后遍历放入元素。hello世界"=>0B,68,65,6C,6C,6F,E4,B8,96,E7,95,8C std:string Utf8String 数组，元素必为上述内置整型或string类型 ...
数据序列化和持久化
T*字符串，每个元素为字符类型 元素字符用 utf-8 编码 先入以 LEB128 编码的 uint32 表达元素个数，然后遍历放入元素。hello世界"=>0B,68,65,6C,6C,6F,E4,B8,96,E7,95,8C std:string Utf8String 数组，元素必为上述内置整型或string类型 ...
设置扫描防护
扫描防护帮助网站自动阻断包含指定特征的访问请求，例如请求源IP在短期内发起多次Web攻击或目录遍历攻击、请求源IP来自常见扫描工具或阿里云恶意扫描攻击IP库。前提条件 已开通Web应用防火墙实例，且实例满足以下要求：包年包月实例：实例...
CREATE AGGREGATE
mffunc 使用移动聚集模式时用到的最终函数名称，当所有输入行都被遍历后会调用它来计算聚集的结果。它的工作和 ffunc 一样，但是它的第一个参数类型是 mstate_data_type 并且额外的空参数要通过书写 MFINALFUNC_EXTRA 来指定。mffunc 或者 ...
电商：功能遍历场景
电商：功能遍历场景 可视自动化录制脚本，快速构建自动化脚本库，覆盖全链路功能。自动深度探索各个页面，发现潜在的问题，提升测试效率。版本性能基线对比，发现版本改进趋势。常见问题，提供解决方案，帮助开发者快速定位问题。其它疑问...
现代IM系统中的消息系统—实现
在拉取到新消息列表后，客户端（或应用层）会遍历所有新消息，然后将新消息所对应会话的未读计数累加1，这样实现了未读消息的即时感知与更新。只有当用户点开会话后，会话的未读计数才会清零。在更新未读数的同时，会话列表中还会有最新...
高级应用：实现复杂作业逻辑
for-each节点 DataWorks的for-each节点主要用于有循环遍历的场景，且需要与 赋值节点 联合使用，将赋值节点作为for-each节点的上游节点，将赋值节点的输出结果赋值给for-each节点后，一次次循环来遍历赋值节点的输出结果。for-each节点的...
功能概览
cap 返回有环的路径 dedup 去重 distinct[*]打散 has 过滤实体 hasKey 过滤字段名 hasLabel 过滤标签 hasValue 过滤字段值 is 过滤数值或string limit 截断，保留最前的结果 not 返回“子遍历不能产生结果”的输入 or 返回“至少在一个子遍...
新版Memcache如何遍历所有key
在新版本的云数据库Memcache版实例中，您可以使用阿里云自研命令MSCAN遍历所有key。命令结构 MSCAN 命令通过多轮调用、批量查询的方式来获取所有key，查询过程不会阻塞Memcache服务，对性能影响极小。命令的使用说明如下。命令结构 mscan ...
如何基于LSM-tree架构实现一写多读
DDL的物理复制如何实现 物理复制相对于逻辑复制一个关键优势在于DDL，对于DDL而言，逻辑复制可以简单理解为复制SQL语句，DDL在从库上会重新再执行一遍。逻辑复制对于比较重的DDL操作，比如Alter table影响非常大，一个Alter变更操作在主库...
模型优化
遍历次数一般不建议修改（除非您想快速训练完成），学习率参数有时对于模型的影响非常大，可以尝试在 0.001~0.0001 进行调整。有时候上述对于模型的调整可能对于性能的提升都不是很大，这时可以考虑从数据层面来优化。比如数据的预处理阶段...
XMSSMiner挖矿蠕虫分析
XMSSMiner通过不同方式收集key、host、username、sshport，而后通过循环遍历方式进行横向移动或对外传播，其收集方式如下表所示：类型 文件或命令 说明 获取key id_rsa*遍历/root和/home，最多遍历3层目录.ssh/config 指定路径.ssh/config....
模型优化
对于模型的优化，我们提供如下几个建议：如果您的数据集不大(例如仅几百条)，建议调整遍历次数（例如调整到10或者20次），使模型得到更充分的训练。换一个不同模型试试。不同的模型架构在不同的任务上表现可能不同，如果您发现LSTM+CRF ...
性能优化
Traverses（遍历）：通过该步骤过滤的去重后的遍历数量。Time(ms)（时间）：该步骤主动执行遍历的总时间，单位：毫秒。Dur：该步骤的耗时占总时间的百分比。说明 DMS不支持 profile()命令，建议您通过Gremlin Console连接实例后使用该命令...
路由算法
说明 若未配置路由算法，则在对逻辑表的数据进行操作时，会遍历逻辑表对应的每一个物理表，整体操作时间会成倍增加。路由算法由路由字段+算法组成。使用场景 分表数据查询 分表数据变更 分表数据导出 配置说明 您可通过目标逻辑库找到对应...
Java线程栈分析-CPU利用率持续升高
再结合业务同学的反馈，大概有500多个jar包，所以根据线程栈分析得出的初步猜测是：在反序列化过程中遇到未加载的类，然后触发URLClassLoader从500多个jar包中遍历查找类，这个查找过程导致了CPU利用率持续升高。根据上述的栈名称，我们从...
PAI发布基于Quota队列的4大调度策略功能
发布智能、遍历、均衡、FIFO 4大调度策略，提升客户AI算力利用效率 适用客户 拥有大规模AI算力资源的用户，人工智能、大模型、AIGC创业者，互联网AI业务等企业客户。新增功能/规格 PAI资源配额（Quota）代表了一组AI算力资源，基于PAI资源...
页面编排设计器内节点说明
例如，对于以下对某个 list 变量内元素遍历并操作的场景：List<Structure_A>aList;for(var i=0;i;i+){ Structure_A a=aList[i];func(a);} 在遍历节点内时，集合变量为 aList，条目变量则为 a，条目下标为 i。循环中对 a 变量的操作，则在遍...
InnoDB Physiological Logging
优点 高效率，并且可以直接修改物理格式，任何操作都不需要重新遍历Btree到指定页面。缺点 产生的日志量大。例如：一次 DELETE 操作，逻辑日志只需要记录MLOG_COMP_REC_DELETE offset，但实际执行过程中需要修改prev_record->next_record、...
层次查询伪列
层次查询伪列如下：CONNECT_BY_ISCYCLE CONNECT_BY_ISLEAF LEVEL CONNECT_BY_ISCYCLE CONNECT_BY_ISCYCLE 用于标识层次遍历过程中环的起始位置。如果当前节点的子节点中也存在其祖先节点，CONNECT_BY_ISCYCLE 伪列返回1，否则返回0。下图中...
- 产品推荐
- 这些文档可能帮助您