热门好课推荐
猜你喜欢
相关培训 相关博客
  • 不懂数据库的程序员不是合格的程序员,正在学Python的我怎么能不懂数据库,几经思考,终于选了数据库经典入门课程MySQL开始学习。可是刚一开始学我就遇到了难题~!SQL语句insert、delete、update、select增删改查?怎么数据库和学英语一样还要背语法!网上查了好久,才明白想要学数据库,就得先学会使用SQLiteExpert等数据库工具,还有执行SQL语句进行“增删改查...
    2019-08-20 10:43:32
    阅读量:3564
    评论:0
  • 大数据的实时计算与离线统计整理学习1.实时计算ApacheStorm流程:业务数据、消息队列、Storm实时编程、Redis、数据展示(秒级计算)应用场景:对数据处理的时效性要求较高,及时响应,秒级甚至毫秒级延迟。example数据处理:对于数据的处理,主要分为3大阶段:数据采集、数据处理、数据的可视化数据采集:1)Magpie实时采集:自主研发,对线上生产...
    2018-12-03 20:01:38
    阅读量:2146
    评论:0
  • 1大数据处理的常用方法大数据处理目前比较流行的是两种方法,一种是离线处理,一种是在线处理,基本处理架构如下:在互联网应用中,不管是哪一种处理方式,其基本的数据来源都是日志数据,例如对于web应用来说,则可能是用户的访问日志、用户的点击日志等。如果对于数据的分析结果在时间上有比较严格的要求,则可以采用在线处理的方式来对数据进行分析,如使用Spark、Storm等进行处理。比较贴切的...
    2019-06-15 18:45:32
    阅读量:405
    评论:0
  • 大数据相关体系梳理:今天小伙伴突然问我大数据都学习了些神马?就有了如下的对话,我也决定为她好好解答一下疑问。so,我们今天主要是以离线数据处理的技术为主。在这里我还是要推荐下我自己建的大数据学习交流qq裙: 957205962, 裙 里都是学大数据开发的,如果你正在学习大数据 ,小编欢迎你加入,大家都是软件开发党,不定期分享干货(只有大数据开发相关的),包括我自己整理的一份2018最新的...
    2018-12-09 11:30:38
    阅读量:1054
    评论:2
  • 前言先引用一下马云大大的话:很多人还没搞清楚什么是PC互联网,移动互联网来了,我们还没搞清楚移动互联的时候,大数据时代又来了。马云深度解析大数据“大数据”是近年来IT行业的热词,并广泛的应用在各行各业。特别是近年来随着社交网络、物联网、云计算以及多种传感器的广泛应用,以数量庞大,种类众多,时效性强为特征的非结构化的数据不断涌现,数据的重要性愈发凸显,传统的数据存储、分析技术难以实时处...
    2018-07-05 10:53:33
    阅读量:5618
    评论:8
  • Hadoop、spark都是一个生态,2者是一个互补的关系,2者有很多相似的部分。hadoop实现了一个分布式文件系统-高延迟批处理大吞吐-hadoop的mapreduce程序用Java写Spark基于内存计算的开源的集群计算平台-低延迟小文件处理-spark的mapreduce程序用scala写学习spark最好有些hadoop的知识,至少目前ha
    2015-07-30 21:40:44
    阅读量:1900
    评论:0
  • 一、学习大数据需要的基础 java SE,EE(SSM) 90%的大数据框架都是java写的 MySQL SQL on Hadoop Linux 大数据的框架安装在Linux操作系统上二、需要学什么 2.1:大数据离线分析 一般处理T+1数据 (T+1:T表示处理时间(一天,一周,或者一月,一般不会一年处理一次数据) +1:表示处理一次数据) Hadoop :(common、HDF...
    2018-06-09 00:21:24
    阅读量:485
    评论:0
  •    在线学习使用一个数据或是小批量数据   离线学习使用全部数据参与训练
    2018-07-05 17:25:04
    阅读量:1792
    评论:0
  • 大数据方向的工作目前分为三个主要方向:01.大数据工程师02.数据分析师03.大数据科学家04.其他(数据挖掘本质算是机器学习,不过和数据相关,也可以理解为大数据的一个方向吧)一、大数据工程师的技能要求二、大数据学习路径三、学习资源推荐(书籍、博客、网站)一、大数据工程师的技能要求总结如下:必须技能10条:01.J
    2017-09-26 22:24:45
    阅读量:6053
    评论:0
  • 一、学习大数据需要的基础    java SE,EE(SSM)        90%的大数据框架都是java写的    MySQL        SQL on Hadoop    Linux        大数据的框架安装在Linux操作系统上二、需要学什么    第一方面:大数据离线分析        一般处理T+1数据            Hadoop 2.X:(common、HDFS、Ma...
    2018-06-11 17:07:33
    阅读量:872
    评论:2