热门好课推荐
猜你喜欢
相关培训 相关博客
  • 大数据学习心得一、概述1大数据简介1.1起源“大数据“,近几年来最火的词之一。虽然大数据这个词的正式产生也就10年左右,但对大数据分析却早就有之。早在互联网初期,就有很多公司通过计算机技术对大量的分析处理,比如各个浏览引擎。然而,大数据的真正提出却是源自2008.09.03《Nature》专刊的一篇论文,紧接着,产业界也不断跟进,麦肯锡于2011.06发布麦肯锡全球研究院报告,标志着
    2017-03-01 22:52:20
    阅读量:21189
    评论:0
  • 作业一hadoop搭建伪分布式*1.关闭防火墙systemctldisablefirewalld2.传输JDK和HADOOP压缩包(版本自行留意)这里建议使用xshell和xftp63.解压JDK、HADOOP(这里解压安装至opt/module目录)tar-zxvfjdk-8u121-linux-x64.tar.gz-C/opt/moduletar-zxvf...
    2019-05-27 12:23:44
    阅读量:118
    评论:0
  • 之前未习惯发布学习心德博文,后续会采用这种方式发布学习心得,希望能够很好的督促自己。计划会按scala,Hadoop,Spark的顺序去学习。刚学scala的时候,眼前一亮,这语法跟python,java很像啊,刚好两者很熟悉,偷笑,后面果然学的得心应手。今天就不发表具体的技术内容。反正王学林老师的视屏讲解很好,声音非常富有感染力,想开小差都比较难,呵呵,话语精炼,个人较喜
    2015-12-22 22:45:09
    阅读量:1167
    评论:0
  • 大数据学习心得与总结在此之前,需要做的准备:1、vnware创建centos虚拟机2、安装secureCRT3、安装eclipse4、配置JDK作业一:centos搭建伪分布式修改虚拟机配置文件①core-site.xml<property><name>fs.defaultFS</name><val...
    2019-05-22 13:32:42
    阅读量:273
    评论:0
  • 一.Linux的安装以及其文件系统结构  1.在Cent_OS的安装的过程中,安装过程可分为多种安装模式,默认的是最小安装模式只安装系统最精简的部分,内核及相关的扩展部分(纯属个人理解),在安装过程中其网络有三种格式分别是NAT,桥接,Host-Only.     (1)NAT    原理:NAT是Networkaddresstranslate的简称。其主要应用在Interne
    2018-01-17 23:35:09
    阅读量:295
    评论:0
  • 前言本人是IT行业刚入行的新人,在看过许多大佬写的博客后也忍不住想写一些自己的东西。这是本人第一次写博客,技术不够,不敢妄谈一些太过前沿的技术的东西,想简单写写自己学过的东西,就当温故而知新了。本篇便以hadoop框架为主题来写点东西。众所周知,hadoop框架出现已久,hadoop主要由三个部分组成:hdfs、yarn、mapreduce。诚然,作为早期的分布式开源框架,MapReduce实...
    2019-05-04 16:41:31
    阅读量:61
    评论:0
  • 写了几年代码,看到这些年大数据,AI闹得火热火热,也想系统学习下大数据方面的东西,给自己充电一下。其实随着IT技术的发展,我们行业(地理信息)也已经开始拥抱大数据了。越来越多的带有位置的非结构化的数据需要处理,需要进一步挖掘。好了,废话不多说了。下面开始分享下,学习大数据这门过程中的一些心得。其实,大数据这门课,学起来还是得要有些知识储备的,比如最基本的linux操作,以及操作hive以及mysq...
    2018-01-09 11:24:38
    阅读量:12
    评论:0
  • 常常会用到切片技术java代码1@Transactional(readOnly=false)2publicvoidsaveCommonMsg(CommonMsgcommonMsg){34//删除碎片5List<CommonMsgContent>list=commonMsgContentD...
    2016-01-07 15:20:00
    阅读量:2
    评论:0
  • 既然是大数据,我们首先看“大”,也就是数据的体积。“别老扯什么Hadoop了,你的数据根本不够大”。文章出自有着多年从业经验的数据科学家ChrisStucchio,纽约大学柯朗研究所博士后,搞过高频交易平台,当过创业公司的CTO,更习惯称自己为统计学者。下面我们一起看他的观点:1.好几百M的数据,Excel装不下!这种级别完全和“大”无关,类似Pandas这样的工具就可以处理的
    2014-03-30 23:41:11
    阅读量:506
    评论:0
  •  大数据就业方向: 视频广告流式文件 社交/个人位置 要  大数据应用场景:1)电商行为分析预测  终端位置信息采集  移动联通电信运营商  视频气象2)金融 教育电信 卫生安防 物联  阿里是做企业和个人购物的,他的支付宝(金钱),购买的快递业,淘宝一淘阿里巴巴*(电商)腾讯是做个人社交和个人社交下产品增值的百度是做...
    2014-07-06 09:00:28
    阅读量:189
    评论:0