热门好课推荐
猜你喜欢
相关培训 相关博客
  • 一直在努力学习大数据大数据相关的技术,很想了解众多老司机的学习历程。因为大数据涉及的技术很广需要了解的东西也很多,会让很多新手望而却步。所以,我就在自己学习的过程中总结一下学到的内容以及踩到的一些坑,希望得到老司机的指点和新手的借鉴。目前正在学习分布式理论和ZooKeeper大数据学习QQ群:142974151前言在学习大数据之前,先要了解他解决了什么问题,能给我们带来什么价值。一方面,以...
    2019-05-15 15:55:27
    阅读量:17
    评论:0
  • 接下来你可以学习Linux,java和linux是学习大数据的基础,学不分先后。Linux因为大数据相关软件都是在Linux上运行的,所以Linux要学习的扎实一些,学好Linux对你快速掌握大数据相关技术会有很大的帮助,能让你更好的理解hadoop、hive、hbase、spark等大数据软件的运行环境和网络环境配置,能少踩很多坑,学会shell就能看懂脚本这样能更容易理解和配置大数据集群。...
    2018-12-03 12:38:10
    阅读量:63
    评论:0
  • 学习大数据需要的基础1、javaSE、EE(SSM)  90%的大数据框架都是Java写的2、MySQL  SQLonHadoop3、Linux  大数据的框架安装在Linux操作系统上-需要学什么大数据离线分析  一般处理T+1数据(T:可能是1天、一周、一个月、一年)  a、Hadoop:一般不选用最新版本,踩坑难解决    (...
    2018-11-26 14:51:00
    阅读量:465
    评论:0
  • 一直在努力学习大数据大数据相关的技术,很想了解众多老司机的学习历程。因为大数据涉及的技术很广需要了解的东西也很多,会让很多新手望而却步。所以,我就在自己学习的过程中总结一下学到的内容以及踩到的一些坑,希望得到老司机的指点和新手的借鉴。目前正在结合机器学习理论学习MLlib源码前言在学习大数据之前,先要了解他解决了什么问题,能给我们带来什么价值。一方面,以前IT行业发展没有那么快...
    2018-12-06 15:21:44
    阅读量:31
    评论:0
  • 写在前面:这是一个系列文章,沉淀了我在数据治理领域的一些实践和思考。共分为5篇。分别是:一、大数据治理:那些年,我们一起踩过的坑主要讲讲数据治理工作中常见的一些误区。二、要打仗,你手里先得有张地图:数据治理之元数据管理这一篇讲讲元数据的概念和具体应用场景。三、不忘初心方得始终:数据治理之数据质量管理提升数据质量,始终是数据治理工作中最重要的目标之一。本篇讲述如何科学地进...
    2018-12-17 15:00:32
    阅读量:2798
    评论:0
  • 最近在学习大数据的相关知识,刚把hadoop伪分布式单机版配置环境搭好,基本操作也算练习了一遍,下面准备弄集群了.学完hadoop就要开始学Spark,时间还是挺紧的.现在大三了,自己也是第一次自学大数据,没什么经验,坑都是要一个一个踩的,这样才能更好地去锻炼自己的能力,提高自己包括自学等各方面的水平!平时我会把自己犯过的错和一些知识或者经验总结归纳到自己的博客里面,大数据方面也有挺多的,和我一...
    2018-10-06 21:18:45
    阅读量:103
    评论:0
  • 酷狗音乐的大数据架构本身很经典,而这篇讲解了对原来的架构上进行重构的工作内容,总共分为重构的原因、新一代的大数据技术架构、踩过的坑、后续持续改进四个部分来给大家谈酷狗音乐大数据平台重构的过程。眨眼就是新的一年了,时间过的真快,趁这段时间一直在写总结的机会,也总结下上一年的工作经验,避免重复踩坑。酷狗音乐大数据平台重构整整经历了一年时间,大头的行为流水数据迁移到新平台稳定运行,在这过程中填过坑,挖...
    2019-05-17 22:00:02
    阅读量:1930
    评论:0
  • 最近这两天一直在研究怎么训练自己的网络。通常方法有三种,其中一种比较典型的就是使用tfrecord的形式,将数据转化为tensorflow通用的格式,送入到网络中,首先看了一些相关的参考资料,答题思路都基本是一致的,都是先把原始图片和标签图片依次读入,然后转化为string类型,由于python3.2之后,tostring()被弃用了,所以,可以利用与其功能近似的tobyte(),然后利用tf.tr
    2017-09-23 21:55:25
    阅读量:3360
    评论:6
  • 学习大数据相关知识或实际项目中踩过的“坑”,从今天开始,不定期将所遇问题通过公众号写笔记的方式进行整理记录,也方便以后随时实地都可以快速检索,今天先整理2个最近遇到的问题发布出来,欢迎大家一起学习:) 一、遇到机房突然停电,或者自己关机或重启的时候,忘记停止大数据平台相关组件/服务,开机启动大数据平台启动不了(一直卡在NameManager启动过程不动),这种情况多半是HDFS进入安全模式了,可以...
    2018-06-20 11:11:41
    阅读量:63
    评论:0