精华内容
下载资源
问答
  • Java开发大数据开发要做到几点?假设你有Java基础选择了自学大数据,而对于完全没有编程Java基础的人来说,自学绝对是浪费时间精力的事情。 现在已经从之前的java后端开发正式转大数据开发,项目数据50T,日均...

    Java开发转大数据开发要做到几点?假设你有Java基础选择了自学大数据,而对于完全没有编程和Java基础的人来说,自学绝对是浪费时间和精力的事情。

    现在已经从之前的java后端开发正式转大数据开发,项目数据50T,日均数据增长20G左右,大概是需求问题吧,工资待遇较上一份翻了一倍(这是重点)。

    当然,我的分享不是能让各位升职加薪跳槽,只是对于技术人来说,技多不压身,以下为个人经验分享,不喜勿喷。主要讲大数据的职业规划方向、大数据开发工程师需get技能、如何系统的学习。

    一、大数据的职业规划方向

    学习目的在于工作上的运用,大数据工程师需get技能总结如下:

    01.Linux基本操作

    02.python&爬虫介绍

    03.hadoop分布式集中

    04.离线数据处理

    05.实时数据处理

    06.ETL与环境相关

    07.大数据应用与数据挖掘

    08.java高级(虚拟机、并发)

    09…HBase(JavaAPI操作+Phoenix)

    10.Kafka

    11.Spark(Core+sparksql+Sparkstreaming)

    12.CDH集群

    二、如何系统的学习

    我本人是17年年初开始自学,自学了Linux基本操作,这个很好学,领悟能力还可以就看书,不行就看视频重复看,大概一周可以搞定。

    然后就学习了CDH集群搭建,Python爬虫,我是java后端开发,这些网上找点资料看点书,很好学,上手也很快。

    这里重点推荐《深入理解Java虚拟机》、《Java高并发实战》必看书籍。

    然后我就停留在这一阶段,停了1个多月的学习计划,后面公司同事离职跳槽跟女友吵架分手等等遇到一些事情,我又想起还是要规划下自己的职业生涯,顺手报了个培训班,遇到了还算不错的老师,这个学习周期3个月就算结业了。计划是想熬完过年再跳,跳槽的人都知道的,金三银四~

    这里提醒一下,如果你觉得自己看书效率太慢,或者容易思维不通的情况,你可以在网上搜集一些课程,跟着课程走也OK。这个完全根据自己情况决定。如果看书效率不高就很网课,相反的话就自己看书。自制力不强的人就没什么好推荐的,你什么都不适合学。
       人工智能、大数据、云计算和物联网的未来发展值得重视,均为前沿产业,多智时代专注于人工智能和大数据的入门和科谱,在此为你推荐几篇优质好文:
    1.在学习大数据之前,需要具备什么基础
    http://www.duozhishidai.com/article-12916-1.html
    2.大数据工程师培训,需要学习的有哪些课程?
    http://www.duozhishidai.com/article-15081-1.html
    3.大数据的特点是什么,大数据与Hadoop有什么关系?
    http://www.duozhishidai.com/article-13276-1.html


    多智时代-人工智能大数据学习入门网站|人工智能、大数据、物联网云计算的学习交流网站

    多智时代-人工智能大数据学习入门网站|人工智能、大数据、云计算、物联网的学习服务的好平台

    展开全文
  • 今天在知乎上看到一个问题,问:你为什么从java开发大数据方向?大数据方向能走的更远吗?我是从java开发转到大数据开发的。看到这个问题,想到了几年前,学校刚毕业时,在传统行业做ja...

    天在知乎上看到一个问题,问:

    你为什么从java开发转大数据方向?大数据方向能走的更远吗?

    我是从java开发转到大数据开发的

    看到这个问题,想到了几年前,学校刚毕业时,在传统行业做java开发,一直想加入bat,没有门路,在当时,对于双非渣二本学历、又没有什么互联网大厂经验的同学来说,还是很难的,基本面试的机会都不会给吧。

    现在回想,当初转方向的原因如下:

    1、趁风口,有机会加入互联行业

    那时2013年左右,在传统行业做java开发,一直想加入互联网行业,但是很难,一直在寻找突破口(曾经在地铁看到带着阿里工牌的小哥哥,主动加他QQ,求他帮忙内推)。

    正好大数据刚火起来不久,真正有经验人的很少,在招人方面 要求还没那么严格。然后就果断转了,最后,经过坎坷努力,曲线救国,从58同城到网易,终于在去年拿到了字节跳动和阿里的offer,不过最后拒了阿里,选择了字节跳动,目前来看转型还算成功,不过也时常会感到迷茫。

    2、大数据方向待遇总体level比java开发要好一些。

    最早2013年做java开发,记得当时薪资是9k,在团队里也算是核心研发人员,就这9k还是当时我要离职,老板为留人狠心给涨的。当时老板说已经很高了,不能再高了。

    转了大数据方向后,第一份工作月薪13k,还入门级别的,当然现在待遇是更加好一些了。

    3、做java开发转大数据 更有优势。

    还记得当时hadoop还是hadoop1版本,学了不到两周,就出去找工作了。能学这么快,完全是因为有java开发的功底。再加上后来,自己研究hadoop源码,hive源码,包括现在的spark sql,flink sql源码调试,都是与之前的java开发功底分不开的。

    上面说这么多自己的经历,就是想说大数据方向还是可以的,并且薪资待遇也会不错。 

    如果能先拿到一张知名互联网的经历的门票,找工作会更加容易些。

    至于【大数据方向能走的更远吗?】 这个问题,我觉得决定能不能走的远,走的好的因素是看自己在这个方向上有没有积累和沉淀的更多,定好目标,做好规划,剩下的就是自己一步步实践,走好每一步了,最后的结果大概率是好的!!!

    最后,我想说,如果想尝试一件事,just do it, 趁年轻!

    扫描下方二维码

    添加好友,备注【交流群

    拉你到学习路线和资源丰富的交流群

    展开全文
  • Java开发大数据开发要做到几点?假设你有Java基础选择了自学大数据,而对于完全没有编程Java基础的人来说,自学绝对是浪费时间精力的事情。Java开发大数据开发要做到几点? 现在已经从之前的java后端开发正式...

    Java开发转大数据开发要做到几点?假设你有Java基础选择了自学大数据,而对于完全没有编程和Java基础的人来说,自学绝对是浪费时间和精力的事情。Java开发转大数据开发要做到几点?

    Java开发转行大数据,需要做到哪几点?


    现在已经从之前的java后端开发正式转大数据开发,项目数据50T,日均数据增长20G左右,大概是需求问题吧,工资待遇较上一份翻了一倍(这是重点)。

    当然,我的分享不是能让各位升职加薪跳槽,只是对于技术人来说,技多不压身,以下为个人经验分享,不喜勿喷。主要讲大数据的职业规划方向、大数据开发工程师需get技能、如何系统的学习。

    一、大数据的职业规划方向

    学习目的在于工作上的运用,大数据工程师需get技能总结如下:

    01.Linux 基本操作

    02.python&爬虫介绍

    03.hadoop分布式集中

    04.离线数据处理

    05.实时数据处理

    06.ETL与环境相关

    07.大数据应用与数据挖掘

    08.java高级(虚拟机、并发)

    09..HBase(JavaAPI操作+Phoenix )

    10. Kafka

    11. Spark (Core+sparksql+Spark streaming )

    12.CDH集群

    二、如何系统的学习

    我本人是17年年初开始自学,自学了Linux 基本操作,这个很好学,领悟能力还可以就看书,不行就看视频重复看,大概一周可以搞定。

    然后就学习了CDH集群搭建,Python爬虫,我是java后端开发,这些网上找点资料看点书,很好学,上手也很快。

    这里重点推荐《深入理解Java虚拟机》、《Java高并发实战》必看书籍。

    然后我就停留在这一阶段,停了1个多月的学习计划,后面公司同事离职跳槽跟女友吵架分手等等遇到一些事情,我又想起还是要规划下自己的职业生涯,顺手报了个培训班,遇到了还算不错的老师,这个学习周期3个月就算结业了。计划是想熬完过年再跳,跳槽的人都知道的,金三银四~

    这里提醒一下,如果你觉得自己看书效率太慢,或者容易思维不通的情况,你可以在网上搜集一些课程,跟着课程走也OK 。这个完全根据自己情况决定。如果看书效率不高就很网课,相反的话就自己看书。自制力不强的人就没什么好推荐的,你什么都不适合学。

    展开全文
  • java开发转型大数据开发之路(转岗必读)

    千次阅读 多人点赞 2018-10-21 18:57:32
    我从16年的时候从java开发岗位学习之后转学习大数据然后跳槽,算是比较早学习大数据的一批了。 所以经常有同学问我关于大数据如何自学,有什么高效的学习线路,从java转大数据,初期如何找工作,这里我就说一下我...

    众所周知,这两年IT行业最火的词是什么,毫无疑问是大数据。 我从16年的时候从java开发岗位学习之后转学习大数据然后跳槽,算是比较早学习大数据的一批了。

    所以经常有同学问我关于大数据如何自学,有什么高效的学习线路,从java转大数据,初期如何找工作,这里我就说一下我自己的情况,算不上什么经验之谈,如果你有这样的困惑,那可以花几分钟看看。

    本人去年一个普通本科毕业,计算机科学与技术专业,学校的时候计算机成绩中上,玩游戏的同时专业课还学了个马马乎乎。毕业之后,还算幸运的在广州的一个小软件公司做java开发,虽然薪资不到6k,但比很多找不到工作的同学还是要好多了。但也很苦逼,那时天天加班,快累成狗啦,最主要是没正经吃过几顿热饭,泡妹的时间更是少之有少。

    男人年轻时可以苦点儿,但寂寞这事还是有点受不了,不到5个月我就有了跳槽甚至不做码农的想法。

    于是找一些混得还不错的师兄师姐求教取经,有个在华为的师兄建议我学大数据,我听了他的建议,主要原因有三个:

    1)他自己在华为做大数据薪资18k,对当时的我来说很是羡慕;

    2)他说大数据这个方向相对java来说编程的份量没那么重,所以加班方面相对好一点,很少会长期加班;

    3)他说大数据这个方向可以干得久一点,不完全是青春饭。

    师兄当时推荐我看《Hadoop权威指南》,我满心欢喜的啃了3周,发现还是有些难。一看就懂,但真正操作的时候各种错误。光开发环境这事,我在淘宝上买了份9块钱视频,又到处找了一些零碎的资料看,耗了我将近2周也只是能勉强跑起来而已 。对于急于摆脱当前苦逼工作的我来说,这种日子有点难熬。

    书看不下去,那就视频吧。于是,我在网上各种搜,QQ群里各种求,视频搞了将近2T,什么这七天那宝典的,后来发现那完全是浪费时间,内容垃圾不说,还只能看一部分,用来下载的时间比能看的视频的总时间还长。qtmd,老子不想再被它们这样玩了。

    书不行,免费视频不行,那就剩下第三条路了,培训!对,就是培训,曾经我最最鄙视的学渣才需要的培训,也成了我唯一的选择。很长时间,我都自我安慰,大数据比较高端,自学不行也是正常的。现在看来,我应该感谢自己当时那个英明的决定。为什么?

    后来我发现,大数据和java或者android开发还不一样,网上书上空谈理论的多,教你玩真正大数据的少,你或许连一个真正有效的大数据实战项目都找不着(p.s. 16年我注意到慢慢有一些了,15年的时候真是很难找)。

    好了,既然培训那就找机构吧。问了几家线下,一般都是2.2万的价格,还有一家2.58万,去死吧,我四五个月工资不吃不喝全给你还不够。后来又网上到处搜,当时做大数据的也不是很多,云*、炼*直接pass了,看过他们的视频,如果是学生花几百块钱学点花拳秀腿还可以,毕竟便宜,社招学真本事我直接忽略。后来也听了超*的七天,感觉讲得太浅,而且听群里人说,学他们的课程的很多人到公司后过不了试用期,动手能力不行,项目也比较简单,几个小时就讲完一个项目。随后,差点报了北风,也试听了,价格小1万,就在考虑是否报了。

    一次偶然的机会在一个QQ群里有人发线上课,我去听了一下,为了避免广告嫌疑,我就不说什么学校的了,当时印象很深的是那个老师拿他服务器上跑的东西给大家展示,讲hadoop及大数据的生态体系,其实我也听不懂,但当时我有几个感觉:

    1)这老师讲课还挺有意思,我能听得下去;

    2)这老师有真东西,至少不是拿小的演示程序在那讲,应该是真正有大数据经验的人;

    3)这老师还有助教比较实诚,课堂上没有吹学完这课就能年薪几十万,反而是在抨击这事,这让工作过一段时间的我很是认同,我不认为我自己有报个班出去就拿三五十万的命。

    课后,我向那个各种人员联系问了价,当时是4000多一点(现在好像也七八千了),当时的价格在市场上还是很有竞争力的,没怎么纠结,第二天就报了名,还送了个基础的就业课。

     

    接下来应该是题主关注的重点了,我是否被坑?学的怎么样?说说我个人对我学习的大数据的内容和效果方面的看法:

    1)项目含金量绝对足,网上很多视频是没法比的,但对没基础的人压力会有些大。从我和身边的同学整理学习状况来看,效果还不错,至少要比我当初想的要好很多,我们那个班有的同学是已经做过一两年的hadoop过来学,我开始还不太理解,后来老师讲后期的大项目时才明白,做几百M数据的小项目写写MR程序那不叫大数据,处理TB/PB级数据时的方案还有过程中的一些问题解决才是更有价值的,那些有基础的同学主要也就是看中老师这方面经验去学的。苦逼的是像我这种基础弱的人,前面的项目还好,后面的项目有些跟不上,我自己只能听懂四五分,课程结束后自己又反复看了三遍才算消化了六七分吧,算球,我知足。

    2)课程内容最好的一点(大多同学的反馈),就是他们有详细的操作文档,文档中还有相关的数据和需求资料什么的,跟着文档认真操作一般问题都不大。早期我个人看网上视频有很深的感受就是,都是讲的也能听懂,但下来操作操作不了,缺这个少那个,还有各种报错。

    3)很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深入了解,想学习的同学欢迎加入大数据学习qq群:458345782,有大量干货(零基础以及进阶的经典实战)分享给大家,并且有清华大学毕业的资深大数据讲师给大家免费授课,给大家分享目前国内最完整的大数据高端实战实用学习流程体系

    4)碰到问题时答疑还不错,主讲老师答疑时间不是很多,但另外两个老师整天在,态度也不错,实在搞不定就主讲老师来。他们的学习群里还有很多有经验的人回答问题,估计应该是大讲台官方给钱请的兼职,有时还可以QQ远程协助,这个厉害,我中间就有几个问题是一哥们远程帮忙解决的。

    5)有点不好的是,他们的课程限制比较多,每天一定量的学习任务,不是很自由,而且不交作业后面的内容看不了。客观来讲,为了学习效果控制一下进度从而避免贪多嚼不乱没什么问题。但太死板,而我当时急于找工作,所以这一点不是很喜欢。

    6)他们的课程主要偏重于Hadoop,讲得比较深,有些机构的课是spark、hadoop、storm一起讲,讲得浅一些。如果想把大数据一次全部搞定的话,他们的课不是很合适。我个人倾向于先学好Hadoop,毕竟之前是做java的,如果学spark还得学scala,周期太长。现在我们公司除了Hadoop也会用spark,我边做边学,毕竟搞过7个多月的hadoop,感觉学spark也挺快。

    对于课程本身,我想说的就上面这些,其它机构高价的付费课我也没法同向比较,我就说一下我自己学习过程中的一些看法,希望对各位读者有帮助。

    补充一句,可能也是大家在意的 —— 就业问题。我学完课程之后,又花了三周左右的时间反复看视频,后来找工作比较顺利,1周多点的时间吧就换了工作,薪资和同期其它同学来说不算太高,但相对我自己来说还不错,涨了4k的样子。我很知足,关键是不再干搬砖一样的java项目啦,更更关键的是加班少了,泡妞时间多了^o^。

    最后,如果你也是java开发者,对大数据感兴趣,我可以把我自己大数据学习的线路和技能知识点分享给你们。联系方式后台联系小编。

    展开全文
  • 我从16年的时候从java开发岗位学习之后转学习大数据然后跳槽,算是比较早学习大数据的一批了。 所以经常有同学问我关于大数据如何自学,有什么高效的学习线路,从java转大数据,初期如何找工作,这里我就说一下我...
  • Java和Java大数据有什么区别?

    千次阅读 2020-04-02 15:25:57
    java和java大数据学习的内容是一样的吗?两者有什么区别呢?今天就从java和java大数据的以下方面谈谈两者的区别。 Java和Java大数据有什么区别 Java和大数据的关系: java是计算机的一门编程语言;可以...
  • 自我介绍我是Fan义,不是科班出身,大学学的是生物工程,后来也是自学加培训入的行,入行就做了 3年的Java 开发,后来觉得大数据前景更好一些,就想着转型大数据,经过疯哥指导后,在今年 ...
  • 2018最新最全的免费大数据公开课,免费前99评论者 头条系统每天关注上限100人 1:为了防止关注人数上限,私信收不到,2:私信发网盘链接失效,)3:为了加人气,需要以下,Python,大数据,架构等资料的朋友!免费送给...
  • 对于自己来说,也是刚从传统java转向大数据开发,对自己来说是一个很好的机会。 现在公司刚成立了数据分析师(DA)岗位,我被选中转向该岗位(最终应该有六七人的规模),属于市场部门管理。 领导沟通了,这个...
  • java工程师和大数据工程师谁更好找工作? 【导语】从目前的社会形式来看,Java的工作岗位比较多一些,就业人群也比较大,大数据作为新兴职业,虽然需求量也是很大的,但是就业门槛比较高,对于专业技能的要求也是比较...
  • Java和Java大数据学习的内容是一样的吗?两者有什么区别呢? Java和Java大数据二者关系 Java是计算机的一门编程语言;可以用来做很多工作,大数据开发属于其中一种。 大数据属于互联网方向,就像现在建立在大数据...
  • Java开发是IT行业的经典岗位,行业当中存在普遍的需求,Web开发、Android开发、游戏开发等岗位,基本上Java语言是主力队伍。而进入大数据时代,Java又在大数据方向上有了用武之地。今天我们主要来讲讲Java大数据开发...
  • java基础+大数据

    2016-07-26 11:50:37
    java基础+大数据 以及一些学习的方法
  • 今天我们来讲讲Java大数据开发当中,必须掌握的四种数据库。 大数据时代的数据,我们可以大致分为结构化数据非结构化数据。其中,结构化数据,主要是依靠传统的关系型数据库去存储,比如说Oracle、MySQL、...
  • 鄙人之见,Java开发适合开始的工作方向,但是后期如果想有更好的发展最好还是往对数学要求高的方向转,比如人工智能、区块链、大数据等。为什么?因为Java后端作为一个开发性的工作,说到底工作还是做业务逻辑上的...
  • Java?还是大数据

    2021-03-03 14:13:31
    IT 行业的人可能听过“Java 大数据开发”这个名词,其实这并不是一个新岗位,而是因为大数据开发的编程语言以 Java 为主,掌握 Java 是进行大数据开发的基础,这才形成了“ Ja...
  • 大数据一定要学Java吗,Java和大数据什么关系?当你迈入大数据的领域,首先必要接受的是大数据开发的洗礼,编程语言作为大数据的基础方向是你入门的突破口,一定要仔细学习。在这里很多同学都会有一个疑问:编程语言...
  • Java开发腾讯大数据批量导入【Aaron】,Java开发腾讯大数据
  • Java大数据开发工程师应需Java开发工程师的基础 !
  • 大数据框架的编写支持很多开发语言,目前流行的大数据Hadoop框架,很多部分都是用开源的Java语言编写。Hadoop 的创始人 Doug Cutting 曾说过:Java 在开发者的生产率运行效率之间取得很好的权衡。开发者可以使用...
  • 架构不是一个职业而是一种能力,每一种架构师只不过是在不同的领域里面使用不同的技术,没有什么可对比,就好比如你问一个篮球...架构确定以后,有能力去指导开发去继续设计演化,如果开发设计演化出来的东西架构不...
  • 现在很多学习大数据技术的人会选择学习Java大数据和Java有什么关系呢,零基础小白怎么入门学习Java呢?正确理解Java的各种“抽象”。 学习Java就是学习各种“抽象”,包括类、接口和抽象类等,不同层次的抽象意味...
  • Java和大数据的关系

    2020-03-20 21:01:10
    看到很多人都选择学习JavaJava和大数据的关系是怎样的? 诚然,很多Java程序员都纷纷转型大数据,不是因为Java行业饱和,而是想更大程度上突破自己的技术,来获得更多高的成就,当然了还有基本的工资待遇...
  • 从工作内容上来说,大数据开发主要是负责大数据挖掘,大数据清洗处理,大数据建模等工作,主要是负责大规模数据的处理应用,工作主要以开发为主,与大数据可视化分析工程师相互配合,从数据中挖掘出价值,为企业...
  • 先说下大数据的就业岗位有哪些吧 大数据的就业领域是很宽广的,不管是科技领域,还是食品产业,零售业等等,都是需要大数据人才进行大数据的... 1、Hadoop开发工程师  Hadoop是一个分布式文件系统(Hadoop Distr...
  • 随着互联网事业的蓬勃发展,编程语言越来越火爆。Java工程师收入高、业内需求量大,备受人们青睐。...对于Java程序员,大数据的主流平台hadoop是基于Java开发的,所以Java程序员往大数据开发方向转行从语言环境上...
  • 非常多的人,尤其是没有研究过,没有关注过这块知识的人都容易误解Java 和大数据的概念,甚至有些人认为大数据就是用java写的。 一:两者关系 java是计算机的一门编程语言;可以用来做很多工作,大数据开发属于...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 153,397
精华内容 61,358
关键字:

java开发和大数据

java 订阅