数据库案例集锦-开发者的《如来神掌》

数据清洗、采样、脱敏、批处理、合并 1、数据采样和脱敏实践《PostgreSQL 数据采样与脱敏》《PostgreSQL 巧妙的数据采样方法》 2、数据清洗和去重实践《PostgreSQL 数据去重方法大全》《PostgreSQL 重复 数据清洗 ...
来自: 阿里云 >网站

数据来源、数据生态、数据技术、数加平台等方面,...

目前人人都在谈大数据,谈DT时代,但是,大数据是什么,每个人都自己的一个看法,好比盲人摸象,每个都认为自己摸到是真正的大象。我也担心我所看到的,只是大数据的冰山一角,毕竟,将引领整个人类下一次变革的大...
来自: 阿里云 >网站

漫谈阿里大数据

简单讲,大数据需要大量能互相连接的的数据(不管是自己的,还是购买,交换别人的),他们在一个大数据计算平台(或者是能互通的各个数据节点上),相同的数据标准能正确的关联(如ETL,数据标准),通过大数据相关...
来自: 阿里云 >网站

阿里云试用中心,为您提供0门槛上云实践机会!

0元试用32+款产品,最高免费12个月!拨打95187-1,咨询专业上云建议!
广告

现阶段我国大数据共享面临的问题

另外,需要进一步建立基础数据库,一方面要集中存储被共享的数据,同时进行清晰校验和整合,提供可以共享的目录,以便用户可以接入和收取这些数据。当然,还要规定访问的权限和进行灾备等。中国政府数据开放平台分布...
来自: 阿里云 >网站

邬贺铨:大数据共享与开放面临哪三大挑战?

另外,需要进一步建立基础数据库,一方面要集中存储被共享的数据,同时进行清晰校验和整合,提供可以共享的目录,以便用户可以接入和收取这些数据。当然,还要规定访问的权限和进行灾备等。中国政府数据开放平台分布...
来自: 阿里云 >网站

阿里巴巴 JAVA开发手册 内含大量规范,应用范例....

阿里巴巴 JAVA开发手册 ...但是这个属性在数据提取时并没有置 具体值,在更新其它字段时又附带更新了此字段,导致创建时间被修改成当前时间。10.【强制】序列化类新增属性时,请不要修改serialVersionUID字段,避免反...
来自: 阿里云 >网站

数据应用安全研究报告(11家公司实践详解)

▊腾讯大数据业务应用框架为用户提供三大基础能力:数据:提供海量的数据接入能力与处理能力;连接:提供开放接口,做互联网+的连接器;安全:重视网络安全,将其作为连接一切的防护体系。腾讯特别注重在提供大数据...
来自: 阿里云 >网站

创业必称“大数据”?是时候重新审视大数据的价值了

TalkingData和友盟等企业通过在APP/手游中接入SDK,实现对用户行为数据的采集、分析与管理。大量的终端覆盖和数据沉淀使得这类企业具备了提供DMP和移动广告效果监测服务的能力。GrowingIO更是直接面向业务人员,推出...
来自: 阿里云 >网站

《企业大数据系统构建实战:技术、架构、实施与应用》...

数据安全规范,包括数据安全定义、接触、接入、备份、同步、授权、认证、加密、操作日志记录等;数据操作规范,包括数据的新增、修改、更新、删除等数据变更规范,数据加密、解密等脱敏和安全规范以及数据提取、分发...
来自: 阿里云 >网站

《企业大数据系统构建实战:技术、架构、实施与应用》...

数据安全规范,包括数据安全定义、接触、接入、备份、同步、授权、认证、加密、操作日志记录等;数据操作规范,包括数据的新增、修改、更新、删除等数据变更规范,数据加密、解密等脱敏和安全规范以及数据提取、分发...
来自: 阿里云 >网站

数据“土豪”电信云告诉你,如何“玩转”数据生态

接入层面来讲,不管是家里的宽带,通过移动网、IPTV以及其他一些设施在接入运营商服务还是其他行业服务时,都会大量数据产生,这也是我们运营商本身在数据源的优势。整个覆盖层面,不管是在时间空间上,还是本身...
来自: 阿里云 >网站

MaxCompute 2.0:阿里巴巴的大数据进化之路

在登月的过程中,不仅将数据统一到了一起,还实现了数据分级打标、数据脱敏、ODPS授权流程、虚拟域接入在云端查询版等工作。新平台具备高性能和全面的数据统一。随着把数据统一到一起,阿里巴巴在管理平台上也做了...
来自: 阿里云 >网站

数据安全市场现状和需求分析

“大数据脱敏20%的青睐者,这项技术适用于数据分发和共享场景下的安全需求,但这个数字没有想象中高,也许用户是出于性能考虑?有待观察。分享完给自家产品打个广告,欢迎了解。阿里云市场官方店铺:...
来自: 阿里云 >网站

数据痛点|《财经》封面报道

这些数据公司利用爬虫技术,抓取海量网页上的数据,按类将这些数据进行整合梳理,再接入许多第三方数据。“像火车票购买数据和房屋买卖数据数据量不大,但是价值很高。Sensors Data的创始人兼CEO桑文锋告诉《财经...
来自: 阿里云 >网站

日交易笔百万级,Ping+的大数据平台架构

从支付接入、交易处理、业务分析到业务运营、大数据营销,Ping+以定制化全流程的解决方案来帮助企业应对在商业变现环节可能面临的诸多问题。Ping+的百万级交易挑战 Ping+ 通过搭建在云端的支付处理平台为商户集中...
来自: 阿里云 >网站

如何基于日志,同步实现数据的一致性和实时抽取?

考虑到数据安全性,对于有脱敏需求的场景,Dbus的全量storm和增量storm程序也完成了实时脱敏的功能。脱敏方式3种:& 总结一下:简单的说,Dbus就是将各种源的数据,实时的导出,并以UMS的方式提供订阅,支持实时...
来自: 阿里云 >网站

智慧城市开放数据的发展趋势分析及探讨

在2015年土耳其主办的G20峰会上,发布了G20反腐开放数据原则介绍,指出了六大原则,包括默认开放数据、及时性和全面性、可接入性和可用性,可比较性和互操作性,提高监管和市民参与,发展和创新。这一系列运动大大...
来自: 阿里云 >网站

智慧城市开放数据的发展趋势分析及探讨

在2015年土耳其主办的G20峰会上,发布了G20反腐开放数据原则介绍,指出了六大原则,包括默认开放数据、及时性和全面性、可接入性和可用性,可比较性和互操作性,提高监管和市民参与,发展和创新。这一系列运动大大...
来自: 阿里云 >网站

高可用大数据计算服务如何持续发布和演进

在此之上,MaxCompute支持灵活的语言,为了让用户能够无缝接入MaxCompute,我们也支持开源系统好多的API,包括spark API和Hive API等。批处理计算 目前,对于阿里巴巴甚至业界来说,SQL类型的批处理是最经典最广泛的...
来自: 阿里云 >网站

中国大数据争夺战已进入前所未有的高度

连接服务结合硬件与管理平台,从管道接入型连接向平台级连接与端到端基础设施服务拓展。未来五年,中国移动计划针对海量连接管理、复杂计费管理、安全可靠保障、实时运维保障等连接需求,提供包括芯片模组、智能硬件...
来自: 阿里云 >网站

从顺丰数据泄露事件看我国企业IT系统建设的安全软肋

而事实上,测试、分析、开发等场景中,并不需要使用完整的真实信息,完全可以通过数据脱敏产品,将敏感信息进行处理后再交由相关人员。脱敏处理的同时,并不能忽视对数据库的访问行为进行严格的运维管控,对特殊敏感...
来自: 阿里云 >网站

数据:新动力 新机遇 新途径

截至2015年底,全市光网覆盖扩大至334万户,已覆盖所有行政村,城区和农村平均接入能力分别达100Mbps和50Mbps,互联宽带接入用户已经超过380万户,互联网城域出口带宽超过2900Gbps,互联网国际出口专用通道带宽达到...
来自: 阿里云 >网站

《机器人操作系统ROS原理与应用》——2.3 大数据制度...

数据安全规范,包括数据安全定义、接触、接入、备份、同步、授权、认证、加密、操作日志记录等;数据操作规范,包括数据的新增、修改、更新、删除等数据变更规范,数据加密、解密等脱敏和安全规范以及数据提取、分发...
来自: 阿里云 >网站

高可用大数据计算服务如何持续发布和演进

在此之上,MaxCompute 支持灵活的语言,为了让用户能够无缝接入 MaxCompute,我们也支持开源系统好多的 API,包括 spark API 和 Hive API 等。批处理计算 目前,对于阿里巴巴甚至业界来说,SQL 类型的批处理是最经典...
来自: 阿里云 >网站

何鸿凌:电信行业大数据应用案例的实践及思考

交通管理部门还有线圈数据、出租车的采集数据等,哪些数据精确度更高,是GPS级别,我们的数据覆盖更广。第三是零售。帮助一些大的零售商分析顾客来源和各商铺、展位的人流情况。有点类似西班牙电信的Smart Steps。这...
来自: 阿里云 >网站

窥探“大数据”全貌(技术篇、产业篇、企业转型篇)

TalkingData和友盟等企业通过在APP/手游中接入SDK,实现对用户行为数据的采集、分析与管理。大量的终端覆盖和数据沉淀使得这类企业具备了提供DMP和移动广告效果监测服务的能力。GrowingIO更是直接面向业务人员,推出...
来自: 阿里云 >网站

拥抱“大数据时代”共享发展新成果

征信产品主要针对金融行业征信类大数据应用,基于中国联通真实全面的用户信息大数据资产,在保障用户隐私安全的前提下,利用脱敏数据提供金融行业数据验证和征信评估服务,为专业化的授信机构提供信用信息共享服务。...
来自: 阿里云 >网站

三大运营商新战场:与BAT争夺大数据金矿

其中连接服务重在硬件及管理平台,推动连接服务从管道接入型连接向平台级连接与端到端基础设施服务拓展。未来五年,中国移动计划面向海量连接管理、复杂计费管理、安全可靠保障、实时运维保障等连接需求,提供包括...
来自: 阿里云 >网站

如何基于日志,同步实现数据的一致性和实时抽取?

考虑到数据安全性,对于有脱敏需求的场景,Dbus的全量storm和增量storm程序也完成了实时脱敏的功能。脱敏方式3种: 总结一下:简单的说,Dbus就是将各种源的数据,实时的导出,并以UMS的方式提供订阅,支持实时...
来自: 阿里云 >网站

通信行业未来发展的“丝绸之路”:拥抱大数据时代 ...

征信产品主要针对金融行业征信类大数据应用,基于中国联通真实全面的用户信息大数据资产,在保障用户隐私安全的前提下,利用脱敏数据提供金融行业数据验证和征信评估服务,为专业化的授信机构提供信用信息共享服务。...
来自: 阿里云 >网站

如何防范人工智能、大数据、区块链、云计算的技术风险...

线接入区块链网络,对接入的链接进行身份验证,排除未经授权的节点接入以免数据泄露,防止网络攻击。2. 隐私泄露是互联网企业面临的普遍问题,对该类风险的应对策略是:第一,由认证机构代理用户在区块链上进行交 易...
来自: 阿里云 >网站

阿里巴巴 JAVA 开发手册

阿里巴巴 JAVA 开发手册 1.0.0 阿里巴巴集团技术部 2016.12.7 首次向 Java 业界公开 一、编程规约(一)命名规约1. 【强制】所有编程相关命名均不能以下划线或美元符号开始,也不能以下划线或美元符号结束。反例:_...
来自: 阿里云 >网站

如何防范Fintech创新中的人工智能、大数据、区块链、...

线接入区块链网络,对接入的链接进行身份验证,排除未经授权的节点接入以免数据泄露,防止网络攻击。2. 隐私泄露是互联网企业面临的普遍问题,对该类风险的应对策略是:第一,由认证机构代理用户在区块链上进行交 易...
来自: 阿里云 >网站

如何防范Fintech创新中的人工智能、大数据、区块链、...

线接入区块链网络,对接入的链接进行身份验证,排除未经授权的节点接入以免数据泄露,防止网络攻击。2. 隐私泄露是互联网企业面临的普遍问题,对该类风险的应对策略是:第一,由认证机构代理用户在区块链上进行交 易...
来自: 阿里云 >网站

安全、稳定、数据0丢失|金融云迁移,袋鼠云解锁新姿势

简化安全组策略,在ECS数量等同的情况下,经典网络的主机四个方向(公网出/,内网出/)的策略配置,而VPC环境下只有两个方向(内网出/)。同时我们通过上面的服务分类分组后,可以直接基于安全组之间进行...
来自: 阿里云 >网站

安全、稳定、数据0丢失|金融云迁移,袋鼠云解锁新姿势

简化安全组策略,在ECS数量等同的情况下,经典网络的主机四个方向(公网出/,内网出/)的策略配置,而VPC环境下只有两个方向(内网出/)。同时我们通过上面的服务分类分组后,可以直接基于安全组之间进行...
来自: 阿里云 >网站

数加DataWorks/MaxCompute在国网浙江电力的最佳实践

快路径主要接入一些电力传输网络上的传感器发送过来的数据,这部分数据实时性比较高,MaxCompute和HBase中数据经过统计和分析之后,产生的结果数据通过数据输出链路传输给RDS、ADS实例,由它们作为企业级数仓数据...
来自: 阿里云 >网站

阿里云开源离线同步工具DataX3.0介绍

DataX作为一个服务于大数据的ETL工具,除了提供数据快照搬迁功能之外,还提供了丰富数据转换的功能,让数据在传输过程中可以轻松完成数据脱敏,补全,过滤等数据转换功能,另外还提供了自动groovy函数,让用户自定义...
来自: 阿里云 >网站

关涛:接手一个6年的平台型系统,我是如何带领团队破...

安全性:不仅仅是ODPS本身产品的安全特性,登月过程中还启动并执行了数据分级打标、数据脱敏、ODPS授权流程、虚拟域接入在云端查询版…… 可管理:数据管理平台不断优化,统一任务调度中心、统一数据同步工具、统一...
来自: 阿里云 >网站

运维改革探索(二):构建可视化分布式运维手段

目前数据安全自动化管理工具,实现从敏感数据识别,脱敏策略配置,数据迁移配置,以及数据在线和离线脱敏全程,自动化安全地将数据从生产环境向非安全环境迁移,同时在迁移过程中实施敏感数据脱敏。分析篇:利用大...
来自: 阿里云 >网站

运维改革探索(二):构建可视化分布式运维手段

目前数据安全自动化管理工具,实现从敏感数据识别,脱敏策略配置,数据迁移配置,以及数据在线和离线脱敏全程,自动化安全地将数据从生产环境向非安全环境迁移,同时在迁移过程中实施敏感数据脱敏。分析篇:利用大...
来自: 阿里云 >网站

价值的技术文档

这里几个例子,考虑到脱敏,抹去了package name ```java/*consists of some valves,each valve may permit or deny an access request independently,an*is granted only when all valves permit the access.*@...
来自: 阿里云 >网站

独家|唇枪舌战,7位顶级专家激辩“AI+医疗”(下)

赖永航:今年国家医疗信息管理部门发起了一个项目,是关于数据脱敏的。今年我们输出的数据要求去标识化,也就是去除能定位到病人的信息,比如姓名、手机号、身份证号等。目前国家正在制定相关的标准。主持人:了...
来自: 阿里云 >网站

国务院《政务信息资源共享管理暂行办法》带来哪些新...

(二)人口信息、法人单位信息、自然资源和空间地理信息、电子证照信息等基础信息资源的基础信息项是政务部门履行职责的共同需要,必须依据整合...共享平台上集中建设或通过接入共享平台实现基础数据统筹管理、及时更新...
来自: 阿里云 >网站

一大波技术大神来袭,你要的性能优化干货这里全都

随着平台功能的日趋完善,以及越来越多重要、敏感业务的接入,我们开始将精力更多地投入到系统、容器、应用的性能提升方面。容器环境不可避免地存在一些性能方面的问题。即便事先做好所有能够想到的准备,也时常会...
来自: 阿里云 >网站

石家庄规划建设智慧城市 三年后城市将大变样

在“数字石家庄地理空间框架”基础上,整合大比例尺矢量数据、高分辨率影像数据、地名地址数据、三维数据、地理国情数据、历史数据、远景规划数据、物联网节点数据等有关信息,构建时空信息云平台,满足城市运行、...
来自: 阿里云 >网站

零点之战!探访阿里巴巴8大技术专家,提前揭秘2017双...

摘要:在距离双11已经不到10天的这个时刻,一场看不见硝烟的战争似乎已经打响。随着一年一度购物狂欢的即将到来,网上出现了很多阿里技术应对双11的段子。“阿里工程师拜关公求服务器不宕机”,...接入CDN能大量的简化...
来自: 阿里云 >网站

【云栖大会】不止降价丨云栖大会阿里云产品重磅发布...

Service)具全面接入资源访问控制服务(RAM)、专有网络(VPC),支持各种安全访问控制。即将发布的一站式开发者服务 一站式开发者服务平台旨在一站式解决开发者在云计算开发过程、流程中的问题。从项目管理、代码...
来自: 阿里云 >网站

“互联网+”为移动医疗提供的七大有力武器!

传统意义上,医疗数据包括病人基本数据出转院数据、电子病历、诊疗数据、护理数据、医学影像数据、医学管理、经济数据等产生于医院的临床数据。随着智能设备和电子病历普及引发医疗数据呈现几何倍数增长,医疗...
来自: 阿里云 >网站

全链路压测-大促备战核武器

数据构造平台以线上数据为基础,借助数据dump工具进行数据的抽取,并对关键数据进行相应的处理(脱敏、订正等)后进入到基础数据池供备用。基础数据池是压测数据的超集,具体压测数据的构造基于基础数据集进行数据的...
来自: 阿里云 >网站

阿里云 - 上云就上阿里云

HTTPDNS 防劫持、就近 接入、解析快 移动 数据分析(公测中) 移动应用 数据采集、分析及开放输出服务 移动热修复 实时修复,无需发版 移动测试 智能、深入、全面、易用的移动测试解决方案 移动用户反馈 支持图片语音,自动抓取应用市场评论 视频点播 上传、转码 ...
来自: 阿里云 >网站

阿里云数加大数据体验馆-机器学习预测农民是否可以得到贷款

的历史发放情况,预测是否给预测集的用户发放他们需要的金额的贷款。 试用机器学习 开通相关产品 开通相关产品 场景概述 图片名称 查看大图 准备工作 1)用户拥有阿里云账号,并创建好账号AcessKey。 2)开通大 数据 开发套件/MaxCompute/机器 ...
来自: 阿里云 >网站

阿里云数加大数据体验馆-机器学习实现海量新闻自动分类

标,完全由机器智能化实现。 试用机器学习 开通相关产品 开通相关产品 场景概述 查看大图 准备工作 1)用户拥有阿里云账号,并创建好账号AcessKey。 2)开通大 数据 开发套件/MaxCompute/机器学习产品。 教程任务 1) 数据导入 ...
来自: 阿里云 >网站

高速通道-云下IDC专线接入-云上VPC私网互通-阿里云

帮助不同网络环境间实现高速、稳定、安全的私网通信。物理专线连接实现云下IDC专线 接入云上,提高网络拓扑灵活性和跨网通信质量;高速上云服务(ECC)基于阿里云智能接入网关的硬件能力和SD-WAN技术,为客户提供整合运营商物理专线的高可靠、高性能、低时延的一站式上云服务;对等连接实现云上跨地域/跨用户的VPC内网互通。 ...
来自: 阿里云 >网站

智能壁挂炉接入物联网方案

适合壁挂炉厂商、壁挂炉方案商 接入 ...
来自: 阿里云 >网站

智能除湿器接入物联网方案描述2020

适合除湿器厂商、控制板厂商 接入 ...
来自: 阿里云 >网站

智能洗碗机接入阿里云物联网天猫精灵方案

智能洗碗机 接入阿里云物联网天猫精灵方案 ...
来自: 阿里云 >网站

鱼缸接入阿里云物联网天猫精灵解决方案

鱼缸 接入阿里云物联网天猫精灵解决方案 ...
来自: 阿里云 >网站

数据管理DMS_云端数据管理_数据库研发支撑_企业级数据库DevOps - 阿里云

提供了一系列强大功能,包括专业 数据访问功能,定制自由的安全规则,全面的操作日志审计,支持RDS和自建实例 接入等等。 其自动化的工单平台使我们的 数据更安全,管理更高效,为兑吧集团提供了可靠的 数据保障。” 产品动态 查看全部日志 > 文档与工具 ... 查看帮助文档> 价格>
来自: 阿里云 >网站

加湿器接入物联网解决方案

适合加湿器厂家、主板厂家 接入 ...
来自: 阿里云 >网站

取暖器接入阿里云物联网解决方案

取暖器 接入阿里云物联网解决方案 ...
来自: 阿里云 >网站

云效_DevOps_敏捷开发_项目管理_研发效能_运维监控_持续交付_研发管理-阿里云

落地实践 一站式服务 提供覆盖“需求- 开发-测试-发布-运维-反馈”全周期的提效工具 安全性保障 稳定的分布式代码托管服务,多中心、去存储、强依赖的运维监控及全面的自动化质量保证 智能化反馈 研发全流程 数据沉淀透出,助力效能瓶颈诊断 ... 查看帮助文档>
来自: 阿里云 >网站

阿里云数加大数据体验馆-雾霾治理哪家强 净化器市场监测

,为什么采集不到网站以前的文章? A :关键词配置后是从配置开始抓取。历史 数据并不会大范围抓取(最多允许前2天的 数据进来) Q:在热词分析中搜索不到我想要的词语? A :说明该词语没有或者只 非常少的舆情信息,建议可以在关键词配置先添加想要分析的词语,然后 ...
来自: 阿里云 >网站

智能冰箱接入物联网方案

适合电冰箱厂家、电冰箱主板厂商 接入 ...
来自: 阿里云 >网站

约克YVAG风冷热泵接入云智能APP

通过4G网关完美实现约克及其它品牌空调系统 接入云智能APP ...
来自: 阿里云 >网站

医疗大脑 - 阿里云

因素进行分析,找到影响核心指标的关键因素和科室,为制定管理策略提供参考。 人工智能能力 接入 面对各类单点的人工智能能力(图像,语音,临床辅助决策等),通过阿里云自主研发的“统一人工智能和 数据集成平台”,医疗机构可以实现一站式智能应用对接,提供可视化应用管理 ...
来自: 阿里云 >网站

阿里云流计算_实时计算_流式数据分析_流式分析_实时数据分析平台

API 作业 开发,提供了批流统一的 Flink SQL,简化 BI 场景下的 开发;可与用户已使用的大 数据组件无缝对接,更多增值特性助力企业实时化转型。 共享模式(包年包月)购买 独享模式(包年包月)购买 独享模式(按量付费)购买 案例与解决方案 产品文档 ... 查看帮助文档>
来自: 阿里云 >网站

数据风控

前端Web 接入相关问题 策略/攻防相关问题 服务端 接入相关问题 更多>> 开发者资源 API 通过发起HTTPS请求调用 数据风控服务API的方式来使用产品。 业务风控API概览 人机验证API概览 SDK 基于SDK以编写代码的方式来使用 数据风控 ... 查看帮助文档>
来自: 阿里云 >网站

阿里云大健康品牌宣传页面-阿里云

医疗器械 健康咨询 智能穿戴 医疗软件 生物基因 医疗云能搞定 哪些事儿 应用于医疗热门业务场景 医药食品 商业智能化 医疗服务平台 实现人与医心灵感应 医疗器械 让机器更 温度 医药上云的第一个小步骤,可以选择的切入点是商业智能。这是医药相关的企业/机构 ...
来自: 阿里云 >网站

HTTPDNS_移动开发_域名解析_域名防劫持-阿里云

HTTPDNS,域名解析,域名防劫持,移动 开发 HTTPDNS是面向移动 开发者推出的一款域名解析产品,具有域名防劫持、精准调度的特性。 HTTPDNS HTTPDNS是面向移动 开发者推出的一款域名解析产品,具有域名防劫持、精准调度的特性。 立即开通 购买 ... 查看帮助文档> 价格>
来自: 阿里云 >网站
< 1 2 3 4 ... 15 >
共有15页 跳转至: GO

你可能感兴趣

热门推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务