并行正则采样排序算法及在 Mars 中的应用
相信大家对排序算法都非常熟悉了,快速排序、堆排序、归并排序等等。如果我们想在一个很大的数据集上进行排序,能利用上多核,甚至是分布式集群,有什么办法么? 本文就介绍一种并行排序算法:并行正则采样排序算法(Parallel Sorting by Regular Sampling),简称 PSRS 算法。 PSRS 算法过程 PSRS 算法的整个过程分为四步,如图所示,我们拆解开来讲。 现在假设我们.....
Spark MLlib中KMeans聚类算法的解析和应用
本文转自公众号:大数据学习与分享原文链接 聚类算法是机器学习中的一种无监督学习算法,它在数据科学领域应用场景很广泛,比如基于用户购买行为、兴趣等来构建推荐系统。 核心思想可以理解为,在给定的数据集中(数据集中的每个元素有可被观察的n个属性),使用聚类算法将数据集划分为k个子集,并且要求每个子集内部的元素之间的差异度尽可能低,而不同子集元素的差异度尽可能高。简而言之,就是通过聚类算法处理给定的数.....
干货|漫画算法:LRU从实现到应用层层剖析(第一讲)
今天为大家分享很出名的LRU算法,第一讲共包括4节。 LRU概述 LRU使用 LRU实现 Redis近LRU概述 第一部分:LRU概述 LRU是Least Recently Used的缩写,译为最近最少使用。它的理论基础为“最近使用的数据会在未来一段时期内仍然被使用,已经很久没有使用的数据大概率在未来很长一段时间仍然不会被使用”由于该思想非常契合业务场景 ,并且可以解决很多实际开发中的问题,...
阿里云达摩院资深算法专家浅谈:视觉生产技术探索及应用
何为视觉生产? 在介绍视觉生产之前我们需要给它进行定义,到底什么是视觉生产。简单来说视觉生产就是通过一个/一系列视觉过程,产出新的视觉表达。这里的产出是指人或机器能够感知的图像视频,而不是标签或者特征并且必须是新的视觉表达,和输入的不一样。在过去,这个过程大多数是由人工来实现,但是现在我们希望通过AI技术,来产生一系列新的图像,本篇文章主要介绍的也是这一过程。 总体来说视觉生产是有分类的....
巡迹防护检测系统——阿里云人脸口罩检测算法新应用,助力疫情防控!
阿里云视觉智能开放平台(vision.aliyun.com)和阿里云巡迹团队合作,由阿里云视觉智能开放平台提供能力,阿里云巡迹团队提供解决方案,基于数字化门店基座结合了人脸口罩识别算法,针对当前的新冠肺炎上线了巡迹防护检测系统。通过此系统可快速识别口罩佩戴情况并实现统计预警,实现疫情防控的AI化,数字化。 除了提到的人脸口罩算法外,阿里云视觉智能开放平台(vision.aliyun.com....
MVP一周精选 20191220:走近AI算法和应用实践
又到了周五分享MVP精彩内容的时刻。今天,阿里云MVP时间专题——人工智能算法和应用实践重磅发布!我们邀请到解决方案架构师赵英俊、机器学习PAI产品专家傲海、安心财产保险有限责任公司原总裁助理兼CIO黄坤直播公开课,更有深圳有信大数据团队负责人田亮、杭州际视合伙人胡逢法、安心保险黄坤的人物专访。本期精选,我们带您了解阿里云 MVP成功背后的故事。 阿里云MVP(阿里云最有价值专家),是专注于帮助....
追剧时,我们是如何被“种草”的?物体检测算法在视频中的应用
小叽导读:想象一下,当电视播放到白雪公主吃下“毒苹果”死亡的那刹那,屏幕中跳出某品牌的苹果广告“xx苹果,新鲜卫生,食用后无不良效果”。屏幕前的你会不会对某品牌印象深刻?今天,我们要探索的是物体检测算法在视频内容广告中的应用,来瞧瞧如何才能让商品广告与视频内容达到完美融合。 背景 业务背景 传统的视频网站广告以贴片为主(视频前贴、中插、后贴等),目前大部分视频网站除会员外用户均不可跳过广告,随.....
SM2 国密算法SSL证书应用于HTTPS加密,如何实现?
如果要在客户端/网关系统和服务端之间进行SSL加密通信,当客户端应用(浏览器等)发起登录认证、加密、签名等请求时,服务端如何实现基于国密算法的SSL加密连接呢?如何解决国密算法的浏览器兼容性问题? 如何实现基于国密算法的SSL认证和加密 国密SSL协议的握手过程如下: (1)交换Hello消息来协商密码套件,交换随机数,决定是否会话重用;(2)交换必要的参数,协商预主密钥(3)交换证书信息,用于....
有小伙伴了解 stzd 或者 lz4压缩算法 怎么在pg或者gp里面应用的事宜么?
问题答疑来自云栖社区-技术进阶[钉钉群],喜爱PostgresSQL的同学扫码进群
ui2code中的深度学习+传统算法应用
作者:闲鱼技术-云听 背景 在之前的文章中,我们已经提到过团队在UI自动化这方面的尝试,我们的目标是实现基于 单一图片到代码 的转换,在这个过程不可避免会遇到一个问题,就是为了从单一图片中提取出足够的有意义的结构信息,我们必须要拥有从图片中切割出想要区块(文字、按钮、商品图片等)的能力,而传统切割算法遇到复杂背景图片往往就捉襟见肘了(见下图),这个时候,我们就需要有能力把复杂前后景的图片划分为各....
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。