《大数据之路：阿里巴巴大数据实践》由阿里巴巴数据技术及产品部组织并完成写作，是阿里巴巴分享对大数据的认知，与生态伙伴共创数据智能的重要基石。相信《大数据之路：阿里巴巴大数据实践》中的实践和思考对同行会有很大的启发和借鉴意义。目录 第1章 总述1 第1篇 数据技术篇 第2章 日志采集 8 2.1 浏览器的页面日志...
消除数据冗余,提升数据一致性,来自传统行业的数据仓库工程师开始尝试架构工程领域比较流行的ER模型+维度模型方式应用到阿里巴巴集团,构建出一个四层的模型架构,即ODL(数据操作层)+BDL(基础数据层)+IDL(接口数据层)+ADL(应用数据层)。
《大数据之路:阿里巴巴大数据实践》就是在此背景下完成的。《大数据之路:阿里巴巴大数据实践》中讲到的阿里巴巴大数据系统架构,就是为了满足不断变化的业务需求,同时实现系统的高度扩展性、灵活性以及数据展现的高性能而设计的。 《大数据之路:阿里巴巴大数据实践》由阿里巴巴数据技术及产品部组织并完成写作,是阿里巴巴分享对大...
《大数据之路:阿里巴巴大数据实践》,作者:大数据之路:阿里巴巴大数据实践阿里巴巴数据技术及产品部 著,出版社:电子工业出版社,ISBN:9787121314384。Alibaba,作为距离大数据非常近的公司之一,近几年对大数据却鲜有高谈阔论。实际上,Alibaba
大数据之路:阿里巴巴大数据实践 一、总述 1.1 对大数据的理解 大、快、多样性只是表象,大数据的真正价值在于生命性和生态性。阿里巴巴称之为“活数据”。活数据是全本记录、实时驱动决策和迭代,其价值是随着使用场景和方式动态变化的。简单的把数据定义为正/负资产都太简单。数据也不是会枯竭的能源。数据可以被重复...
大数据之路:阿里巴巴大数据实践 内容简介: 在阿里巴巴集团内,数据人员面临的现实情况是:集团数据存储已经达到EB级别,部分单张表每天的数据记录数高达几千亿条;在2016年“双11购物狂欢节”的24小时中,支付金额达到了1207亿元人民币,支付峰值高达12万笔/秒,下单峰值达17.5万笔/秒,媒体直播大屏处理的总数据量高达百亿级别...
最近一直在看《大数据之路:阿里巴巴大数据实践》一书,读完之后感觉受益良多。第一,对于整个大数据的体系有了更多且清晰的认知;第二,对于不同系统的逻辑处理方式给予了引导;第三,毕竟是阿里多年技术的累计产出,而且都是阿里技术大牛写的,干货相当多;最后,如果对于大数据方向想有更深入的了解,推荐大家阅读!
结合阿里整个大数据实践历程总结出的大数据方法论 大数据 阿里巴巴 作者其他创作 大纲/内容 数据管理篇 元数据 元数据概述 元数据定义 是关于数据的数据 打通了源数据、数据仓库、数据应用,记录了数据从生产到消费的全过程 主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态以及ETL的...