来自数据的反思:需要你读懂的10个小故事

小故事中醉汉黑暗中寻找的钥匙亦非最终的价值通过钥匙打开的门才是。 对于数据研究而言一旦数据收集、存储、分析、传输等能力提高了即使没有发现什么普适的规律或令人完全想不到的新知识也极大地推动了诸如计算机软硬件、数据分析等行业的发展数据的价值也已逐步体现 ...
来自: 云栖社区 > 论坛 作者: 红指甲绿裙子 浏览:292 回复:2

数据中台之结构化数据存储设计

,需要掌握数据、分布式技术及复杂环境下定位问题的能力,仍然具备很高的技术门槛。数据系统的核心组件包含数据管道、分布式存储和分布式计算,数据系统架构的搭建会是使用这些组件的组合拼装。每个组件各司其职,组件与组件之间进行上下游的数据交换,而不同模块的选择和组合 ...
来自: 云栖社区 > 博客 作者: 木洛 浏览:1842 回复:1

选型宝分享Informatica中国数据管理5经典案例

价值的。 古人说:他山之石,可以攻玉。借鉴同行们的成功案例,是提高我们自身的数据治理水平的最简单、最有效的方式。 下面,就让我们一起来听,选型宝首席架构师李维良与Informatica中国区首席架构师但彬的精彩对话吧。 李维良(主持人) 在数据管理这个 ...
来自: 云栖社区 > 博客 作者: 1171209296521767 浏览:33 回复:0

数据开发必备技能

容器集群,非常值得我们学习。 分布式协调框架: 有一些通用的功能在所有主流数据分布式框架中都需要实现,比如服务发现、领导者选举、分布式锁、KV存储等。这些功能也就催生了分布式协调框架的发展。最古老也是最有名的当属Apache Zookeeper了,新一些 ...
来自: 云栖社区 > 博客 作者: 1557752465510677 浏览:57 回复:0

数据架构在携程的实践及相关案例介绍

。Hadoop大家已经很熟悉,如果不熟悉的同学只要知道Hadoop主要用于数据存储和并行计算批处理工作。 Hive是基于Hadoop平台的数据仓库,沿用了关系型数据库的很多概念。比如说数据库和表,还有一套近似于SQL的查询接口的支持,在Hive里叫做HQL ...
来自: 云栖社区 > 论坛 作者: yyqq122 浏览:280 回复:1

经典数据架构案例:酷狗音乐的数据平台重构

从这张图中,可以了解到数据处理过程可以分为数据源、数据接入、数据清洗、数据缓存、存储计算、数据服务、数据消费等环节,每个环节都有具有高可用性、可扩展性等特性,都为下一个节点更好的服务打下基础。整个数据流过程都被数据质量监控系统监控,数据异常自动预警 ...
来自: 云栖社区 > 论坛 作者: Nicole娃娃 浏览:319 回复:5

EMC Symmetrix企业智能存储系统 介绍

Symmetrix企业智能存储系统通过通用的信息管理系统来简化系统管理任务,通过实现企业数据中心化, 它可以提供轻松的系统管理功能和传送即时用户业务数据,使您始终确保系统完美运行。 优异的性能 Symmetrix企业智能存储系统采用容量超高速缓存关键技术,提供世界最 ...
来自: 云栖社区 > 论坛 作者: alex66323768 浏览:375 回复:0

【云能量沙龙杭州站】伞兴:阿里云开放存储服务API介绍与Web应用案例分享

我们一开始定位的就是做一个公共服务,一个普通老百姓都可以用的服务。接下来我们进入正体:OSS可以存储任意大小的数据对象,这个任意大小是相对的,目前OSS允许的最对象是5TB,但目前为止还没有谁真正传这么数据量上来。接下来是OSS支持海量的对象数目,这个 ...
来自: 云栖社区 > 论坛 作者: sleepbird 浏览:13045 回复:4

申通和民生银行入选信通院云原生应用十优秀案例,揭秘云原 生与数据中台的正确打开方式

联合选出并重磅发布2020年度云原生应用十优秀案例。由阿里云提供技术服务的申通通用云原生计算平台和中国民生银行场景化数据服务中台两案例,在激烈角逐中脱颖而出,成功入选云原生十优秀案例,同时这两案例将被编入《云原生发展白皮书(2020年)》。 以数据 ...
来自: 云栖社区 > 博客 作者: 中间件小哥 浏览:74 回复:0

结构化数据存储,如何设计才能满足需求?

很高的技术门槛。 数据系统的核心组件包含数据管道、分布式存储和分布式计算,数据系统架构的搭建会是使用这些组件的组合拼装。每个组件各司其职,组件与组件之间进行上下游的数据交换,而不同模块的选择和组合是架构师面临的最的挑战。 本篇文章主要面向数据系统的研发 ...
来自: 云栖社区 > 博客 作者: 技术小能手 浏览:662 回复:0

数据架构师必读:金融机构应用数据4案例分析

问题导读 1.数据无法转化为“价值”的原因是什么? 2.四个案例分别介绍了什么内容? 3.本人认为金融机构在数据利用上存在哪两个重要节点? 就“数据+金融”思维利用而言,国外金融机构有着十足丰富的 ...
来自: 云栖社区 > 论坛 作者: annaelvira 浏览:215 回复:4

《大型分布式系统案例实战》浓缩导师10年经验,解密年薪40万+的架构师修炼记!

网站每天1亿数据处的案例剖析 第6课 分布式系统之云计算篇 主机虚拟化:介绍主机虚拟化的技术 网络虚拟化:介绍网络虚拟化的技术 存储虚拟化:介绍存储虚拟化的技术 云计算实践:VirtualBox虚机集群搭建 Openstack原理介绍:介绍 ...
来自: 云栖社区 > 论坛 作者: 黑加仑2012 浏览:262 回复:0

数据的安全底线

汇集,包括大量的企业运营数据、客户信息、个人的隐私和各种行为的细节记录。这些数据的集中存储增加了数据泄露风险,而这些数据不被滥用,也成为人身安全的一部分。另一方面,数据数据完整性、可用性和秘密性带来挑战,在防止数据丢失、被盗取和被破坏上存在一定的技术 ...
来自: 云栖社区 > 论坛 作者: 这可霸气得很 浏览:217 回复:0

【云能量沙龙上海站】周皓: 阿里云开放存储服务API与Web应用案例分享

文件,都是可以存储在系统中。实际上我们广大的互联网应用,从现在观察到的数据来看,基本上分布都是地10KB到10兆大小,很少有人会把一个非常的文件存上来。以后的话,可能会有很多高清的视频文件都是超过了10GB以上,所以我们在做系统的时候已经为这种文件的上传 ...
来自: 云栖社区 > 论坛 作者: sleepbird 浏览:13660 回复:5

阿里巴巴高级技术专家章剑锋:数据发展的 8 个要点

storage 。所以如果你要是 AWS 上面做数据开发和应用,而且你的数据是在 S3 上,那么你就自然而然用到了计算和存储的分离。拥抱容器,与 Kubernate 的整合大势所趋,我们知道在云环境中 Kuberneate 基本上已经是容器资源调度的标准 ...
来自: 云栖社区 > 博客 作者: 中间件小哥 浏览:310 回复:0

结构化数据分析平台设计

持久的存储并且做一些实时或者离线的分析,辅助我们的业务做决策,提供业务大盘和报表,很多公司会构建自己的数据分析平台。也就是时下『数据』平台的由来。这类平台主要解决以下几个问题: 1. 丰富的数据源支持和数据格式延迟绑定 丰富的数据源是因为这样一个数据分析 ...
来自: 云栖社区 > 博客 作者: 宇珩 浏览:167 回复:0

数据架构师、开发人员、公司必读:国外数据应用的10个项目案例(图表)

) 下载附件  保存到相册 2015-4-5 20:12 上传     案例2     题目:利用数据规划米兰     应用领域:城市规划与监测     项目负责人 ...
来自: 云栖社区 > 论坛 作者: 瞎要淇淇 浏览:274 回复:9

决胜Hadoop&Spark数据时代:Hadoop&Yarn&Spark企业级最佳实践

、亚马逊等公司的生产环境中。 Hadoop、Yarn、Spark三者相辅相成 n Hadoop中的HDFS是数据时代公认的首选数据存储方式; n Yarn是目前公认的最佳的分布式集群资源管理框架; n Spark是目前公认的数据统一计算平台;   ...
来自: 云栖社区 > 论坛 作者: 鞠娥峰 浏览:374 回复:0

数据数据挖掘 应用七案例

问题导读 1.出了一个新成品,哪些老客户最可能购买,具体讲了什么案例? 2.如何挖掘电子商务网站公共页面该放哪些内容最可能产生购买行为? 3.如何得到登录网站的当前用户现在最可能购买什么东西? 一个数据库只要有几十万以上记录,就有数据挖掘的价值。 搜集 ...
来自: 云栖社区 > 论坛 作者: zyrp79 浏览:279 回复:3

阿里巴巴数据技术关键进展及展望

智能化数据平台的相关工作进行了介绍,从引擎优化到 “自动驾驶”,并列举了几个典型案例。 摘要:2019杭州云栖大会数据技术专场,由阿里云通用计算平台负责人关涛带来以 “阿里巴巴数据技术关键进展及展望” 为 ...
来自: 云栖社区 > 博客 作者: 晋恒 浏览:274 回复:0
< 1 2 3 4 5 7 >
共有4244页 跳转至:GO
对搜索结果不满意?试试论坛 高级搜索>