专访IBM DB2专家:XML能否引发数据库二次革命

我们怎么动手,这方面我们跟国外比是比较欠缺的部分,因为要做一个好的设计,要做一个实验要花很多的时间,要有一个很好的开放实验室,有一些学校做到了,有一些学校没有做到,我们现在数据库的教学主要这三个部分。我们新技术的教学来看,比如XML,数据仓库,数据挖掘这一块 ...
来自: 开发者社区 > 论坛 作者: 记住该记的住 浏览:193 回复:0

金融大数据架构概述与应用

上,IBM是不碰数据的,给出的都是技术。给出数据库数据放到库里面,跟IBM没有关系,也不去碰。现在IBM一定要去碰数据了,有些数据拿不到,就需要合作,比如Twitter,IBM要与它协同协作。统计显示,Weather这种数据每天的查询量非常大。像这一类的 ...
来自: 开发者社区 > 论坛 作者: 微妙和微波 浏览:171 回复:0

数据工具大全--大数据开源处理工具汇总(100工具)

Cabinet 是一个DBM的实现。这里的数据库由一系列key-value对的记录构成。key和value都可以是任意长度的字节序列,既可以是二进制也可以是字符串。这里没有数据类型和数据表的概念。 当 做为Hash表数据库使用时,每个key必须是不同的,因此 ...
来自: 开发者社区 > 论坛 作者: 爱慕 浏览:651 回复:9

从关系型数据库到后关系型数据库

,并且能够与对象建模工具如和rose软件等接口。更重要的是,cache的对象访问、SQL访问和直接对多维数据数组访问等三种数据访问方式可直接与cache中的数据进行交互。这样就没有额外层次的处理,提高了数据库的性能。Cache还独一无二地提供了事务处理型的 ...
来自: 开发者社区 > 论坛 作者: 睫毛上的雪 浏览:260 回复:1

选型宝访谈:当业务炸裂式增长 ,如何让关系型数据库平滑扩展?

5G包括IOT的时代,可能又会比现在的移动互联网又大一个数量级。所以在互联网蓬勃爆发的阶段,这些互联网公司第一次遇到了大数据的问题。但是传统的关系型数据库都是一个单机的架构,无论怎么搞,它的弹性伸缩能力其实都是没有的,在这个背景下,在互联网行业里面诞生了 ...
来自: 开发者社区 > 博客 作者: 1171209296521767 浏览:74 回复:0

使用Apache Beam SDK构建数据处理管道【开发文档】

成员的处理函数,然后产出一个或多个输出PCollection对象。 4)I/O Source和Sink:Beam提供Source和Sink API接口分别代表读取和数据。Source封装的代码用于从外部读取数据到你的pipeline,比如云存储文件 ...
来自: 开发者社区 > 论坛 作者: 宝宝的兔宝宝 浏览:284 回复:1

细数5款主流NoSQL数据库到底哪家强?

进行的,这使得用户的操作只要进入内存中就可以立即返回,保证了HBase I/O的高性能。 1.3 数据版本 Hbase 还能直接检索到往昔版本的数据,这意味着我们更新数据时,旧数据没有即时被清除,而是保留着: Hbase 中通过 row+columns ...
来自: 开发者社区 > 论坛 作者: 两丢丢 浏览:288 回复:0

ORACLE 基本的数据库管理情况

数据Ø 备份和恢复数据库Ø 联络Oracle公司以获取技术支持1.1.2 安全顾问: 负责用户的注册,控制和监控用户对数据库的访问以及维护系统的安全。1.1.3 网络管理员:管理Oracle的网络产品1.1.4 应用程序开发人员 ...
来自: 开发者社区 > 论坛 作者: 蓝色白开水 浏览:312 回复:0

如何阅读openstack代码,源代码阅读指导

的。项目的开发是慢慢细化的,一开始只是核心,然后是骨架,然后有血肉,然后有做 A 事的工具……到这里,或许你知道我要说什么了,怎么一步步出来的,我们就怎么一步步的去看它。先研究核心,再研究骨架,然后血肉,其它工具 ...
来自: 开发者社区 > 论坛 作者: iojijo 浏览:91 回复:1

NoSQL数据库的分布式算法

来检测和修复计划外的不一致。Cassandra就使用了反熵算法来在各节点之间传递数据库拓扑和其他一些元数据信息。 一致性保证较弱:即使在没有发生故障的情况下,也会出现冲突与读不一致。 在网络隔离下的高可用和健壮性。用异步的批处理替代了逐个更新,这使得 ...
来自: 开发者社区 > 论坛 作者: lzhao 浏览:148 回复:0

数据学习必须掌握的五大核心技术有哪些?

这些数据写入数据仓库中,把零散的数据整合在一起,对这些数据综合起来进行分析。数据采集包括文件日志的采集、数据库日志的采集、关系型数据库的接入和应用程序的接入等。大家可以+下大数据学习裙:74零零加【41三八yi】,在数据量比较小的时候,可以个定时的脚本将 ...
来自: 开发者社区 > 博客 作者: 金鑫工程师 浏览:27 回复:0

如何构建批流一体数据融合平台的一致性语义保证?

,不能假定在一个客户环境里面,会给你无限的磁盘来做缓冲。通常我们在客户那边默认 Topic 为 100G 的容量。如果端读的过快,大量数据会在 Kafka 里堆积,目的端没有及时消费,就有可能出现数据丢失,这是一个非常容易出现的问题。 怎么解决 ...
来自: 开发者社区 > 博客 作者: 巴蜀真人 浏览:87 回复:0

结构化大数据分析平台设计

平台是汇总我们各类业务数据的地方,数据可能来自各类数据库例如MySQL,MongoDB,日志等等。这个平台需要能够方便各类数据便捷的入库,例如通常大家会发现大数据架构中有一个Kafka,各类数据会先进入Kafka,再由Kafka推送到大数据的存储 ...
来自: 开发者社区 > 博客 作者: 宇珩 浏览:167 回复:0

基于云计算的大数据平台基础设施建设实践

,我们更想看到的这些新出来的 SQL 相互间比是怎么样的,别总拿 Hive 比,也许是小兄弟好欺负。存储主要就是 Hadoop/HDFS 、HBase 、对象存储以及 MPP 数据仓库。 Hadoop 是适合大文件一次性写入、多次读取的场景,不能很多小文件 ...
来自: 开发者社区 > 论坛 作者: 接受我可以 浏览:230 回复:0

【IT名人堂】专访Fourinone的创始人彭渊:谈程序员奋斗、企业文化和大数据

下决心掌握这个领域的核心技术. 包括现在的数据库引擎、数据挖掘算法等等,我总在尝试挑战新的技术领域,只要是公司有迫切需要的。 由于以前软件养成的习惯,碰到吃透的技术,我会归纳进程序出来,放入开源产品分享出去,让社会上更多的人去检验你的东西。 公司请你来 ...
来自: 开发者社区 > 论坛 作者: 小爱爱心多 浏览:338 回复:10

hadoop面试题整理

这个问题)    88. 你们处理数据是直接读数据库数据还是读文本数据? 将日志数据导入到 hdfs 之后进行处理    89. 你们 hive 的 hql 语句,大概有多少条? 不清楚,我自己的时候也没有做过 ...
来自: 开发者社区 > 论坛 作者: xxfy 浏览:453 回复:0

给新人】做开发几年的个人经历

频率真的很高。然后再做一做多线程的东西,熟悉线程的调用,解决一下死锁的问题。 就熟练度来说,你多做肯定熟练度越来越高。记得在第二份工作,经常单例模式,所以到今天我都能手单例模式。 但光有熟练度,没有深度也不行。怎么提升技术,那就是解决问题。当遇到困难的 ...
来自: 开发者社区 > 论坛 作者: sissi19850626 浏览:346 回复:1

码分析 | 手mybait-spring核心功能(干货好文一次学会工厂bean、类代理、bean注册的使用)

spring与mybaits集合起来使用,解决了没有实现类的接口怎么处理数据库CRUD操作那么这个知识点可以用到哪里,不要只想着面试!在我们业务开发中是不会有很多其他数据操作,比如ES、Hadoop、数据中心等等,包括自建。那么我们就可以做成一套统一数据处理 ...
来自: 开发者社区 > 博客 作者: 幸运券发放 浏览:25 回复:0

从日志统计到大数据分析

很多,统计结果跑不出来。如果分成每台机器跑一部分,维护代价非常大。 (4)职业发展瓶颈:那个时候还没有数据的概念,大家对数据的价值也没现在这么认可,甚至连招聘面试时,也是把能力一般的分配到统计团队。而脚本满足需求这样的工作是很枯燥的,对一个新人,上三 ...
来自: 开发者社区 > 论坛 作者: 张小美! 浏览:250 回复:3

数据采集和抽取怎么做?这篇文章终于说明白了!

、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据之间高效的数据同步功能。 所支持的数据如下,也可自行开发插件: 类型 数据 Reader(读) Writer() 文档 RDBMS 关系型数据库 ...
来自: 开发者社区 > 博客 作者: liuyanling41 浏览:39 回复:0
< 1 2 3 4 5 7 >
共有6357页 跳转至:GO
对搜索结果不满意?试试论坛 高级搜索>