热门好课推荐
猜你喜欢
相关培训 相关博客
  • 知乎专栏https://dataquestion.com/ ============================================================欢迎关注公众号:程序员面试经验分享(jobbible)
    2018-03-16 15:33:22
    阅读量:1258
    评论:0
  • 大数据推动交易平台信息化目前,全国各省大多已使用或正在建设公共资源交易平台电子化系统,保守估算,全国交易平台月均产生的数据量不低于500TB。然而,我国公共资源交易平台信息共享水平普遍较低,多数交易平台未实现数据交互、资源共享。在这里我还是要推荐下我自己建的大数据学习交流qq裙: 957205962, 裙 里都是学大数据开发的,如果你正在学习大数据 ,小编欢迎你加入,大家都是软件开发党,...
    2018-12-28 11:26:49
    阅读量:130
    评论:0
  • 最近这几个月一直在项目团队中,体验着大数据实施中的点点滴滴,虽说以前管理数据产品的时候,数据采集、ETL、数据分析都在做,但接触交付型项目还是第一次,包括与合作伙伴、政府部门等的沟通,都是全然不同的感受。抛开具体的流程不说,项目实施过程缺少信息化支撑,大部分工作都是excel之间复制粘贴,导致效率极其低效,这是我最大的体会,也是让我最不能理解的地方。昨天几个同事一起吃饭,中间闲聊的内容让我对这个问...
    2019-05-14 14:08:30
    阅读量:88
    评论:0
  • 什么是HBase(1)HBase的原型是Google的BigTable论文,受到了该论文思想的启发,目前作为Hadoop的子项目来开发维护,用于支持结构化的数据存储。(2)HBase是一个高可靠性、高性能、面向列、可伸缩(可扩展)的分布式存储系统,利用HBASE技术可在廉价PCServer上搭建起大规模结构化存储集群。(3)HBase的目标是存储并处理大型的数据,更具体来说是仅需使用普...
    2018-12-21 01:38:18
    阅读量:103
    评论:1
  • 下面是自己参加竞赛的一点经历和心得,希望对你有所帮助!接触竞赛也有一年多了,期间收获最好的成绩应该是第四名,虽然成绩不怎么样,但是真真切切学到很多东西。参加比赛一开始出于奖金的诱惑,奖金动不动就十几百万,甚至更多,现在也出于问题的挑战性和可行性,以及硬件问题。好了,先说说参加比赛的优势。大多赛题都来源于我们的生活,或工业中的各种难题,比如手机流量套餐...
    2019-07-05 09:47:56
    阅读量:115
    评论:0
  • 什么是Kafka?(1)在流式计算中,Kafka一般用来缓存数据,Spark通过消费Kafka的数据进行计算。(2)Kafka是一个分布式消息队列。(3)Kafka对消息保存是根据Topic进行归类,发送消息者称为Producer,消息接受者称为Consumer,此外kafka集群有多个kafka实例组成,每个实例(server)称为broker。为什么需要消息队列1)解耦:...
    2018-12-16 23:30:07
    阅读量:335
    评论:2
  • 新一代大数据处理引擎ApacheFlink:https://www.ibm.com/developerworks/cn/opensource/os-cn-apache-flink/index.html 
    2018-10-07 21:04:43
    阅读量:545
    评论:0
  • 本文旨在为普通程序员(Java程序员最佳)提供一个入门级别的大数据技术学习路径,不适用于大数据工程师的进阶学习,也不适用于零编程基础的同学。前言:一、背景介绍 二、大数据介绍正文:一、大数据相关的工作介绍 二、大数据工程师的技能要求 三、大数据学习规划 四、持续学习资源推荐(书籍,博客,网站) 五、项目案例分析(批处理+实时处理)前言一、背景介绍本人目前是一名大数...
    2018-09-13 11:03:50
    阅读量:1978
    评论:1
  • 所谓大数据,通常指具有体量巨大(Volume)、处理速度较快(velocity)、数据类型多样(variety)以及商业价值较高(Value)4V特点的数据。大数据在智慧城市、电子商务等领域已实现规模化应用,而在推动公共资源交易平台信息化建设方面,大数据也具有突出优势。交易平台信息化建设存在的问题一是数据体量大,共享程度低。目前,全国各省大多已使用或...
    2017-07-04 15:35:00
    阅读量:5
    评论:0