设计大数据

本篇为第二篇，在大数据量的情况下，如何去提前设计这个表结构，来达到一个比较好的效果。对于团队，对于后续的维护和扩展都带来更大的便利。自增id 自增id还是可以有，但是不是必须的了。但是建议还是每张表中有一个自增id。为什么，还是...

会议要求，高新区要紧密聚焦大数据发展前沿，打造“大数据生态”“区块链应用”“人工智能”三大重点工程，夯实“大数据生态”这个基础，强化“区块链应用”这个保障，引领“人工智能”这个趋势，确保高新区在大数据发展方面走在贵阳、贵州...

《大数据算法》一1.3 大数据算法设计与分析

它们在传统算法设计中的智能优化方面扮演了很重要的角色，在大数据处理算法里也有用武之地，考虑到大数据中数据量大、变化快的特点，在使用这些技术设计大数据算法时需要注意算法的可扩展性。1.3.2 大数据算法分析技术和传统算法分析相比...

大数据数仓设计中心是什么意思？

数据中台之结构化大数据存储设计

关键需求大规模数据存储结构化大数据存储的定位是集中式的存储，作为在线数据库的汇总（大宽表模式），或者是离线计算的输入和输出，必须要能支撑PB级规模数据存储。高吞吐写入能力数据从在线存储到离线存储的转换，通常是通过ETL工具，T+...

大数据平台架构设计探究

如果缺乏有效的数据整体架构设计或者部分能力缺失，会导致业务层难以直接利用大数据大数据，大数据和业务产生了巨大的鸿沟，这道鸿沟的出现导致企业在使用大数据的过程中出现数据不可知、需求难实现、数据难共享等一系列问题，本文介绍了...

订单表的分库分表方案设计(大数据)

Mod表示除以一个数后，取余下的数。比如除以32后，余下8，余数就是8。代码符号是用%表示：15%4=3。2、表名称定位：（用户id末尾4位 Dev 32）Mod 32。Dev表示除以一个数，取结果的整数。比如得到结果是25.6，取整就是25。代码用/来表示：$...

《百度运维大数据存储平台设计与实践》电子版地址

《百度运维大数据存储平台设计与实践》百度运维大数据存储平台设计与实践电子版下载地址：https://developer.aliyun.com/ebook/5793 电子书：</div>

大数据平台安全标准设计

从应用角度看，需大数据平台提供如下4项安全功能：图1 大数据平台安全功能 1、边界——限制只有合法用户身份的用户访问大数据平台集群（1）用户身份认证：关注于控制外部用户或者第三方服务对集群的访问过程中的身份鉴别，这是实施大数据...

百度运维大数据存储平台设计与实践

百度智能运维数据平台负责人李玉明在2017CNUTCon全球容器技术大会大会上做了题为《百度运维大数据存储平台设计与实践》的分享，就智能运维与大数据，大规模时序数据存储，海量运维事件数据存储，运维知识库做了深入的分析。...

1 2 3 4 ... 15 >

大数据更多"设计"相关

.结构化大数据分析设计

您可能感兴趣

.大数据问题 .大数据是什么 .ide大数据 .物联网大数据 .大数据数据挖掘 .什么是大数据 .大数据nan .idc大数据

{"optioninfo":{"dynamic":"ture","static":"true"},"simplifiedDisplay":"newEdition","newCard":[{"ifIcon":"img","link":"","icon":"","iconImg":"https://img.alicdn.com/imgextra/i1/O1CN01FRyYE31agvaZrDePN_!!6000000003360-2-tps-1439-1440.png","contentLink":"https://www.aliyun.com/product/bigdata/apsarabigdata","title":"大数据","des":"阿里云大数据是简单、易用、全托管的云原生大数据服务，包括自研一体化大数据智能计算平台ODPS（MaxCompute，Hologres，DataWorks，Flink））和云原生开源大数据产品体系（EMR，Elasticsearch及生态产品）。","link1":"https://www.aliyun.com/product/bigdata/apsarabigdata","btn1":"了解详情","link2":"https://survey.aliyun.com/apps/zhiliao/UfVBgCs4","btn2":"方案咨询","btn3":"大数据体验馆","link3":"https://workbench.data.aliyun.com/experience.htm?spm=a2c0j.14041929.1399591.2.74733097H2MUxa#/","infoGroup":[{"infoName":"ODPS","infoContent":{"firstContentName":"MaxCompute","lastContentName":"实时数仓Hologres","lastContentLink":"https://www.aliyun.com/product/bigdata/hologram","firstContentLink":"https://www.aliyun.com/product/odps?spm=5176.19720258.J_8058803260.193.66022c4afTTWaa"}},{"infoName":"数据开发","infoContent":{"firstContentName":"DataWorks","lastContentName":"数据总线DataHub","firstContentLink":"https://www.aliyun.com/product/bigdata/ide?spm=5176.19720258.J_8058803260.204.66022c4afTTWaa","lastContentLink":"https://www.aliyun.com/product/datahub"}},{"infoName":"开源大数据","infoContent":{"firstContentName":"E-MapReduce","lastContentName":"实时计算 Flink 版","firstContentLink":"https://www.aliyun.com/product/emapreduce","lastContentLink":"https://www.aliyun.com/product/bigdata/sc"}},{"infoName":"检索分析","infoContent":{"firstContentName":"Elasticsearch","lastContentName":"","firstContentLink":"https://www.aliyun.com/product/bigdata/elasticsearch","lastContentLink":""}}]}],"card":[],"search":[],"infoCard":[{"bannerTitle":"阿里云大数据","bannerUrl":"https://img.alicdn.com/imgextra/i1/O1CN01Ijdmbv24KsvapQk1n_!!6000000007373-0-tps-3840-740.jpg","bannerContent":"阿里云大数据包含MaxCompute、Hologres、DataWorks等。企业级安全，极致弹性，开放兼容，更快速地解决海量数据计算问题，有效降低企业成本，并保障数据安全。","liveButtonName":"了解详情","liveButtonLink":"https://www.aliyun.com/product/bigdata/apsarabigdata","homePageName":"方案咨询","homePageLink":"https://survey.aliyun.com/apps/zhiliao/UfVBgCs4"}],"title":{"mainTitle":"阿里云大数据","subtitle":"阿里云大数据是简单、易用、全托管的云原生大数据服务，包括阿里云自研一体化大数据智能计算平台ODPS（MaxCompute，Hologres，DataWorks，Flink））和云原生开源大数据产品体系（EMR，Elasticsearch及生态产品）。","linkUrl":"https://www.aliyun.com/product/bigdata/apsarabigdata","btnText":"查看详情"},"visual":{"topbg":"https://img.alicdn.com/tfs/TB1bQuBIYH1gK0jSZFwXXc7aXXa-3840-740.gif","icon":"","textColor":"dark"},"dataList":[{"summary":"啦啦啦","author":"wuwu","linksUrl":"#"}],"sceneCard":[],"txt":[]}

{"$env":{"JSON":{}},"$page":{"env":"production"},"$context":{"optioninfo":{"dynamic":"ture","static":"true"},"simplifiedDisplay":"newEdition","newCard":[{"ifIcon":"img","link":"","icon":"","iconImg":"https://img.alicdn.com/imgextra/i1/O1CN01FRyYE31agvaZrDePN_!!6000000003360-2-tps-1439-1440.png","contentLink":"https://www.aliyun.com/product/bigdata/apsarabigdata","title":"大数据","des":"阿里云大数据是简单、易用、全托管的云原生大数据服务，包括自研一体化大数据智能计算平台ODPS（MaxCompute，Hologres，DataWorks，Flink））和云原生开源大数据产品体系（EMR，Elasticsearch及生态产品）。","link1":"https://www.aliyun.com/product/bigdata/apsarabigdata","btn1":"了解详情","link2":"https://survey.aliyun.com/apps/zhiliao/UfVBgCs4","btn2":"方案咨询","btn3":"大数据体验馆","link3":"https://workbench.data.aliyun.com/experience.htm?spm=a2c0j.14041929.1399591.2.74733097H2MUxa#/","infoGroup":[{"infoName":"ODPS","infoContent":{"firstContentName":"MaxCompute","lastContentName":"实时数仓Hologres","lastContentLink":"https://www.aliyun.com/product/bigdata/hologram","firstContentLink":"https://www.aliyun.com/product/odps?spm=5176.19720258.J_8058803260.193.66022c4afTTWaa"}},{"infoName":"数据开发","infoContent":{"firstContentName":"DataWorks","lastContentName":"数据总线DataHub","firstContentLink":"https://www.aliyun.com/product/bigdata/ide?spm=5176.19720258.J_8058803260.204.66022c4afTTWaa","lastContentLink":"https://www.aliyun.com/product/datahub"}},{"infoName":"开源大数据","infoContent":{"firstContentName":"E-MapReduce","lastContentName":"实时计算 Flink 版","firstContentLink":"https://www.aliyun.com/product/emapreduce","lastContentLink":"https://www.aliyun.com/product/bigdata/sc"}},{"infoName":"检索分析","infoContent":{"firstContentName":"Elasticsearch","lastContentName":"","firstContentLink":"https://www.aliyun.com/product/bigdata/elasticsearch","lastContentLink":""}}]}],"card":[],"search":[],"infoCard":[{"bannerTitle":"阿里云大数据","bannerUrl":"https://img.alicdn.com/imgextra/i1/O1CN01Ijdmbv24KsvapQk1n_!!6000000007373-0-tps-3840-740.jpg","bannerContent":"阿里云大数据包含MaxCompute、Hologres、DataWorks等。企业级安全，极致弹性，开放兼容，更快速地解决海量数据计算问题，有效降低企业成本，并保障数据安全。","liveButtonName":"了解详情","liveButtonLink":"https://www.aliyun.com/product/bigdata/apsarabigdata","homePageName":"方案咨询","homePageLink":"https://survey.aliyun.com/apps/zhiliao/UfVBgCs4"}],"title":{"mainTitle":"阿里云大数据","subtitle":"阿里云大数据是简单、易用、全托管的云原生大数据服务，包括阿里云自研一体化大数据智能计算平台ODPS（MaxCompute，Hologres，DataWorks，Flink））和云原生开源大数据产品体系（EMR，Elasticsearch及生态产品）。","linkUrl":"https://www.aliyun.com/product/bigdata/apsarabigdata","btnText":"查看详情"},"visual":{"topbg":"https://img.alicdn.com/tfs/TB1bQuBIYH1gK0jSZFwXXc7aXXa-3840-740.gif","icon":"","textColor":"dark"},"dataList":[{"summary":"啦啦啦","author":"wuwu","linksUrl":"#"}],"sceneCard":[],"txt":[]}}