热门好课推荐
猜你喜欢
相关培训 相关博客
  • 之前的文章,整理了一下,补充了一些内容,做了一些更新,现已出版上市了。无耻的推广一下哈;)淘宝,JD都有现货,Amazon貌似还是预售状态中感谢博文视点的@侠少,感谢各位替本书写推荐语软文的朋友们,感谢之前蘑菇街大数据团队的各位小伙伴。目录列表:第1章 大数据平台整体建设思想11.1 什么是大数据平台11.2 大数据平台的建设目标31.2.1 别人的大数据平台是怎样的31.2....
    2018-07-07 13:03:39
    阅读量:6540
    评论:1
  • 本文介绍了druid的基础架构以及工作过程,通过一个应用案例加深了解。durid简介druid是一种高性能、列式存储、分布式数据存储的时序数据分析引擎。能支持“PB”级数据的秒级查询。类似的产品有kylin/clickhouse。druid典型的应用就是OLAP场景下的cube组合查询分析。如数据钻取(Drill-down)、上卷(Roll-up)、切片(Slice)、切块(Dice)以及...
    2018-10-06 15:00:32
    阅读量:397
    评论:0
  • 数据仓库的目的是构建面向分析的集成化数据环境,为企业提供决策支持(DecisionSupport)。其实数据仓库本身并不“生产”任何数据,同时自身也不需要“消费”任何的数据,数据来源于外部,并且开放给外部应用,这也是为什么叫“仓库”,而不叫“工厂”的原因。因此数据仓库的基本架构主要包含的是数据流入流出的过程,可以分为三层——源数据、数据仓库、数据应用:  从图中可以看出...
    2019-03-20 17:47:58
    阅读量:26
    评论:0
  • 导读:本文将大数据的工作角色分为三种类型,包括业务相关、数据科学相关和数据工程。大数据平台偏向于工程方面,大数据平台一般包括数据源、数据采集、数据存储、数据分析等方面。讲师从数据来源、数据源结构、数据变化程度和数据规模等4个维度对数据源进行分类,数据源分类维度的不同决定最后的技术选型。讲师还对数据源分类的定义及选型方式进行详细讲解,最终联系到大数据的应用场景,让数据应用方式更加直...
    2017-06-20 15:26:17
    阅读量:8234
    评论:1
  • 数据仓库的目的是构建面向分析的集成化数据环境,为企业提供决策支持(DecisionSupport)。其实数据仓库本身并不“生产”任何数据,同时自身也不需要“消费”任何的数据,数据来源于外部,并且开放给外部应用,这也是为什么叫“仓库”,而不叫“工厂”的原因。因此数据仓库的基本架构主要包含的是数据流入流出的过程,可以分为三层——源数据、数据仓库、数据应用:  从图中可以看出数...
    2019-06-09 00:15:08
    阅读量:844
    评论:0
  • 微服务架构设计实践 目  次1序言2微服务3软件架构设计思想4微服务架构设计实践4.1项目概述4.2架构准备阶段4.3概念架构阶段4.4细化架构阶段4.4.1业务架构4.4.2数据架构4.4.3应用架构4.4.4技术架构4.4.5物理架构4.4.6开发架构4.4.2 数据架构4.4.2.1 数据架构定义    数据架构定义了用来支持业务的各种数据,以及他...
    2018-04-07 22:56:21
    阅读量:4995
    评论:0
  • 大数据基础处理框架大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。本文将介绍大数据系统一个最基本的组件:处理框架。1.处理框架处理框架负责对系统中的数据进行计算,例如处理从非易失存储中读取的数据,或处理刚刚摄入到系统中的...
    2018-08-02 09:26:57
    阅读量:3265
    评论:0
  • 数据库架构设计思路1.可用性2.读性能3.一致性4.扩展性单库:一个数据库分片:解决数据量太大的问题,也就是通常说的“水平切分”一旦引入分片,势必有“数据路由”的概念,哪个数据访问哪个库路由规则通常分为3种:1.范围:range优点:简单,容易扩展缺点:个库压力不均2.哈希:hash优点:简单,数据均衡,负载均衡缺点:迁移麻烦3.路由服务...
    2018-03-24 09:24:38
    阅读量:5533
    评论:0
  • 由成都市人民政府主办由成都经济和信息化委员会和成都大数据管理局支持成都大数据产业联盟和DataCastle共同承办的智慧中国杯全国大数据创新应用大赛已经正式上线三大行业(教育、金融、交通)赛题同时发布首次“算法赛+应用赛”综合比拼100万超大规模奖金池算法赛还有独立奖金拿一场数据征服之战已经开启竞赛背景大数据是智慧城市的血脉。如今信息基础架构与高度整合
    2016-11-11 09:38:05
    阅读量:1711
    评论:0
  • 大数据产业大数据产业生产流程:数据收集,数据存储,数据建模,数据分析,数据变现。大数据方向:架构、分析、开发数据基础数据的定义:必须承载一定的信息;取决于读者的主观视角信息的定义:信息是用来消除不确定性的东西(香农)。商业智能:应用应用基于事实的支持系统来辅助商业决策的制定。概率统计论古典概型:随机试验结果是有限的且每个事件发生的概率相同。这种试验叫做拉普拉
    2016-11-20 21:34:19
    阅读量:202
    评论:0