精华内容
下载资源
问答
  • 内容涵盖丰富
    千次阅读
    2021-02-08 13:52:54

     

    软件项目运维内容 软件系统运维工作内容

    软件项目运维内容

    ERP项目运维的内容包括哪些

    企业资源管理ERP:在线ERP是针对物资资源管理(物流)、人力资源管理(人流)、财务资源管理(财流)、信息资源管理(信息流)集成一体化的企业管理软件。

    WISSIP平台在线ERP与传统ERP软件有9大优势:1. 独有的缺货缺料表功能:销售缺货、生产缺料会根据虚拟库存生成缺货表和缺料表;通过缺货表、缺料表可以知道订货量是多少,现在尚欠多少,还需要采购生产多少,在表中可自动生成采购单,方便采购员及时采购。

    2. 独有对账单功能:对帐单为企业月结对帐提供了非常方便准确的解决方案,操作员只需要输入客户或供应商的名称,选择对帐时间范围,系统将会自动整理出当前客户或者供应商在选定时间范围内的来往交易记录,结合应收应付还可以准确的把握对帐合计金额、已付金额,尚欠金额。

    3. 收款明细功能:将进销存与财务无缝的结合在一起,在收款过程中填写收款记录时,系统将每一笔收款记录的类别和明细整理到财务系统中;收款员在流水帐查询中,只需要点查询按钮即可当天或者某时间范围内的现金、支票、刷卡等金额以及明细金额;同样财务也可以输入收款员的名字查询到当前收款员的收款明细方便对帐。

    4. 生产成本核算功能:wissip平台在线ERP软件的多层物料清单包括了生产人工费以及原料费的生产成本核算,在销售报价过程中,只需要根据当前成品调出对应的生产成品物料清单,根据客户的需求调节物料清单明细(包括人工费与不同的原料成本费),则立刻核算出其生产成本。

    5. 计划物料功能:根据物料清单系统会自动生存计划物料清单;通过计划物料清单可以知道需要物料是多少,现在尚欠多少物料,还需要采购多少物料,然后计划物料明细汇总为汇总物料清单,然后根据尚欠物料多少自动生成采购单,方便采购员及时采购原料。

    6. 订单处理功能:针对每种订单的每个阶段设定了完善的状态说明,引导操作员在处理订单的时候可以多次反复的进行订单处理行为,这样的操作习惯以人为本,使软件操作更贴切于实际的企业流程。

    7. 仓库盘点功能:仓库盘点功能提供了类似于财务结转的盘点操作,将每次盘点结算的实际库存与软件库存跟进实时进出表校正库存数量,然后通过盘点结转操作将正确的库存结余结转到新的仓库期间中,同时自动生成仓库结转汇总报表。

    这样避免了错误的库存数量累积过多无法管理。

    8. 客户管理功能:客户管理系统根据跟单员的权限绑定了相应的客户信息,如一般跟单员,只可以查询到自己的客户;主管则可以管理、分配所有的客户;同时系统还可以根据客户的重要程度、行业类别、跟进情况进行归类统筹管理等。

    9. 客户跟进功能:客户跟进管理为每一个客户的跟进设定了提醒时间备忘,跟单员可以根据客户的重要程度,安排好每次跟单的内容和时间;系统还为每个客户动态绑定了互动跟单讨论区域,跟单员可以将每次的跟单记录在互动讨论区域内;这样每次跟单都能参考之前的跟单记录,把跟单工作有效的串联起来;这样主管可以根据客户互动讨论区了解到每个跟单员的跟单情况,当客户交接的时候,新的跟单员也可以根据以往跟单记录了解到所有的跟单内容。

    运维必须会软件开发吗?

    不必。

    软件系统运维,主要你熟悉一些与所维护系统相关的软件知识,比较常用的操作系统配置、数据库部署与匹配设置等。

    硬件系统运维,需要你熟悉一些与所维护系统相关的软、硬件件知识,如:台式机、笔记本的主板、cpu、硬盘、显卡、内存等硬件的状态及故障处理技术等,服务器、交换机、路由器等需要懂得必要的ios命令、配置语言、VLAN群组、网络结构划分等等。

    IT运维APP那个好用?

    发布管理 (Release Management) 发布管理是指对经测试后导入实际应用的新增或修改后的配置项进行分发和宣传的管理流程,目的是要保障所有的软件组件的安全性,以确保只有经过完整测试的正确版本得到授权进入正式运行环境。

    事件管理 (Incident Management) 事件管理指的是突发事件管理或意外事件管理,处理IT的危机并要从中恢复运转。

    即在出现事故的时候,能够尽可能地恢复服务的正常运作,避免业务中断,以确保最佳的服务可用性级别。

    问题管理 (Problem Management) 问题管理是指负责解决IT服务运营过程中遇到的所有问题的流程。

    问题管理的主要活动实质上就是分析以被列出问题的事件的根本原因,找出解决方案,把事件的影响最小化,并通过找到已发生事件或潜在事故的根本原因来减少事件的数量或消除事件的再次发生。

    如何构建完善的运维服务体系

    工作强度低不低是看各个公司的,在A公司运维的强度非常高,基本都是晚上回去还要加班做一些事情,主要原因是人比较少;而B公司的运维强度和人均的负荷成正比,这个我虽然为B服务过(以前我在一家B的供应商呆过,去过B做过一段时间),但是现在B怎么样我不太清楚;2.运维工程师工作的技术含量会不会低一些? 所以压力小一些?– 运维的工作性质主要还是维持运行的平稳和高效,工作主要有安装调试软硬件,根据不同开发项目配置服务器软件,监控等事情;相对开发来说更加偏向操作系统或数据库(这是两个方向,一般是分开招人的);而开发的偏向于开发软件和一些中间件,数据库和系统一般就由运维的人把关;我个人认为: a.IT运维工程师发展的方向。

    DBA偏向软件,而OS管理员和network(比如cisco)管理员偏向软硬件结合,还有一种人就是纯粹玩硬件的(安装服务器硬件、机柜什么的); c. 相对开发,运维的经验学习成本是比较高的,就是说你不在一定的实用环境下是没法学会真本事的,而开发你坐在家里就可以摸索一个大概出来;而运维的知识更新的速度相对慢,10年前的DBA知识更新可能只有50%,而他本人会非常值钱,而2年前java的一些内容可能都没有发明出来;除非你在开发做到管理职位,否则纯技术开发学习更新的代价会非常高;反过来说:技术开发适合比较喜欢新鲜、喜欢创新的人,而运维适合循规蹈矩比较踏实的人;3.在B,运维工程师的薪水只有开发的2/3左右.你们公司也是一样吗? –我个人认为:公司给不同position的薪水肯定是和他预估这个职位重要性和工作强度成正比的,但和未来发展是否正比就不得而知了,这在B内部是有可比性的,至于A如何,我不太清楚,应该相差不大,毕竟A的运维已经是全球领先的,而且人数非常少;4.IT运维工程师发展前景怎么样,会不会以后的发展空间比较小?– 所谓IT运维工程师发展空间是要结合你个人的性格,资深DBA之类的人在地球上还是很稀缺的,我知道ebay china operating center的DBA有开宝马上班的,而且运维不是吃青春饭,越老越吃香,可以说是个平滑的上升直线,而开发如果你只是一个执行者和coder,恐怕就是一个开始猛涨后面猛跌的曲线,毕竟开发知识代谢成本太高,过了30就走下坡路; 【推荐阅读】◆外籍IT运维管理人员有何难处◆网络运维管理工程师四则故事解读◆系统运维工程师技能都应包含哪些◆优秀运维管理工程师成长手册 本文来自互联网,仅供参考

    如何构建完善的运维服务体系

    建立符合通用要求及企业自身特点的IT运维服务目录 企业的运维服务目录大类要与IT运维服务目录标准一致,其中一级服务目录包括基础环境运维服务;硬件运维服务;软件运维服务;安全运维服务;运维管理服务及其它运维等六大类,二级包括如网络运维服务;主机运维服务;应用软件服务等十三小类。

    要求IT运维服务企业为甲方提供的运维服务目录要细化到二级,且要根据实际的提供的运维服务内容进一步细化。

    在IT运维服务目录中要详细介绍每种服务的具体服务内容、服务方式、运维过程中的交付成果、成果交付的频度等参数。

    甲方一般只需要参照IT运维服务企业提供的服务目录选择需要的运维服务项目即可,并按照选择IT运维服务项支付相应的服务费用。

    运维服务企业在与甲方签订的《IT运维服务协议》中要明确具体的IT运维服务项及每种服务的具体服务内容、服务方式、运维服务过程中的交付成果、成果交付的频度,服务人员能力要求,运维服务水平评价标准,备品备件的提供等方面,并有可量化,可评价等属性。

    依照企业的IT运维服务目录和运维服务需要制定相应的管理制度 为给甲方提供规范、安全、可靠的运维服务,IT运维服务企业需制定一套科学、完整、详细、且与IT运维服务目录相匹配的运维服务管理制度。

    包括完善的管理组织结构,明确的岗位职责、人员素质能力要求、工作流程和管理制度等方面。

    如人员管理规范,资源管理和储备规范,事件响应规范,问题管理规范,监督管理规范,质量管理规范,信息安全管理规范,知识库(财富库)管理规范,服务台管理规范等。

    另外还包括在实施运维服务项目过程中所需的各类模板。

    如运维服务计划,监督管理计划,培训计划,服务报告,季度报告,事件报告单,问题处理单,满意度调查单等。

    在实践中,IT运维服务企业以管理制度为保证、以运维服务计划为依据为甲方提供良好的运维服务保障。

    IT运维服务企业若要参加IT运维能力(ITSS)评估还需要参照《ITSS通用能力评估申请表》中要求提交的18个文件。

    规范运维服务合同 构建完善的运维服务体系还需从IT运维服务合同着手。

    IT运维服务企业要规范要求与甲方签订的运维服务合同,合同中不仅要规定服务的内容,合同价格,还应该依据运维服务目录和客户的运维服务要求,起草包括详细服务条款的《运维服务合同》附件。

    一般包括服务内容(服务项),服务方式,每项服务的服务质量要求的关键量化指标,服务质量报告的提交方式,提交的频度,服务评价基准等方面。

    合同是运维服务方为甲方提供合格运维服务的依据,所以运维服务企业要在甲方允许的范围内,尽量细化服务指标,至少应细化到服务目录中所展示的级别。

    明确组织内成员的岗位职责 依据运维服务目录和运维服务项目要求制定完善的岗位职责制度,包括管理岗位和运维服务岗位两类。

    一般包括明确的岗位职责说明,清晰的岗位考核指标体系和对应的监督和考核机制。

    有监督服务机制 为保证运维服务企业给甲方提供优质的运维服务,运维服务企业需要建立两级监督服务体系。

    第一级是项目级监督。

    项目经理对项目成员的工作进行监督,项目成员之间也可相互监督,保证运维服务工作顺利开展,出现问题时能按照问题的应急预案及时解决。

    第二级是组织级监督。

    组织级主要是公司高层主管领导和有关的管理部门,公司高层主管领导及有关的管理部门应该对运维服务项目的状态进行监督和控制。

    保证运维服务项目按照计划执行,同时在项目层和组织层的监督范围内。

    组织级的监控主要集中在服务台,服务台的工作主要包括日常的事件受理、派单、回访等,还包括满意度调查等。

    有服务台 服务台是运维服务的中央处理器,用以接收客户的事件报告并及时予以处理、回访,接收客户投诉等。

    IT运维服务企业要建立服务台,并有服务台管理机制。

    服务台接到的事件报告后,常规事件通过服务台直接解决,非常规事件或无法通过服务台解决的事件,服务台要按照相关制度派发工单,安排运维工程师到现场解决。

    服务台还应定期或不定期对客户就运维服务的满意度进行调查,并对调查数据进行分析统计,并通报有关部门和成员。

    建立PDCA机制 运维服务管理体系中包括策划、实施、监督、改进等环节。

    PDCA机制应覆盖到运维服务的各环节,各方面。

    如运维服务管理制度、服务流程、服务质量、服务能力、资源、技术等。

    IT运维服务企业构建完善的IT运维服务体系,要从制度、流程、人员、技术、资源等方面入手,力争做到制度全面,流程规范、清晰,人员职责明确,技术成熟,资源能满足运维需要。

    若从ITSS评估的角度来看,目前大多数运维服务企业主要问题突出表现在流程不够规范,制度落实不到位,实际中以人治为主,法治为辅;人员岗位职责不详细;备品备件类资源储备不达标;缺乏有效的监督机制;缺少完整的实施记录;缺少改进机制;缺少内审等。

    建议企业从基础抓起,做好内部审核,构建完善的运维服务体系。

    linux运维是什么

    linux运维即linux运维工程师;Linux是一套免费使用和自由传播的类Unix操作系统,是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。

    它能运行主要的UNIX工具软件、应用程序和网络协议。

    它支持32位和64位硬件。

    Linux继承了Unix以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。

    运维工程师,集合网络、系统、数据库、开发、安全工作于一身的“复合性人才”。

    “运维”是指:门户网站应用运维,与其它运维如网络、系统的区别还是很大的;然后我们再对大型网站与小型网站进行范围定义,此定义主要从运维复杂性角度考虑,如网站规范、知名度、服务器量级、pv量(PageView)等考虑,其它因素不是重点;因此,我们先定义服务器规模大于1000台,pv每天至少上千万(至少国内排名前20),如sina、alibaba、sohu、baidu、网易等等;其它小型网站可能没有真正意义上的运维工程师,这与网站规范不够和成本因素有关,更多的是集合网络、系统、开发工作于一身的“复合性人才”,就如有些公司将合同采购都纳入了运维职责范围,还有如IDC网络规划也纳入运维职责,这是网络工程师的工作。

    非常重要一定需要明白:网站应用运维对其它关联工种必须非常了解熟悉:网络运维、系统运维、应用开发、内容。

    随着国内软件行业的发展和扩大化,有更多更复杂的系统出现,为了保证系统的稳定运行,需要有更多的运维工程师。

    维护是软件生命周期中较为重要的一个阶段,当前国内还很少提及运维工程师,很多的工作都是软件开发工程师兼职,在未来,运维工程师应该成为一个专有职业称号。

    ...

    运维工程师必须要懂C++吗?

    ■ 设备管理:对网络设备、服务器备、操作系统运行状况进行监控 应用/服务管理:对各种应用支持软件如数据库、中间件、群件以及各种通用或特定服务的监控管理,如邮件系统、DNS、Web等的监控与管理 ■ 数据/存储/容灾管理:对系统和业务数据进行统一存储、备份和恢复 ■ 业务管理:包含对企业自身核心业务系统运行情况的监控与管理,对于业务的管理,主要关注该业务系统的CSF(关键成功因素Critical Success Factors)和KPI(关键绩效指标Key Performance Indicators) ■ 目录/内容管理:该部分主要对于企业需要统一发布或因人定制的内容管理和对公共信息的管理 ■ 资源资产管理:管理企业中各IT系统的资源资产情况,这些资源资产可以是物理存在的,也可以是逻辑存在的,并能够与企业的财务部门进行数据交互 ■ 信息安全管理:该部分包含了许多方面的内容,目前信息安全管理主要依据的国际标准是ISO17799,该标准涵盖了信息安全管理的十大控制方面, 36个控制目标和127中控制方式,如企业安全组织方式、资产分类与控制、人员安全、物理与环境安全、通信与运营安全、访问控制、业务连续性管理等 ■ 日常工作管理:该部分主要用于规范和明确运维人员的岗位职责和工作安排、提供绩效考核量化依据、提供解决经验与知识的积累与共享手段IT运行维护管理的每一个子系统中都包含着十分丰富的内容,实现完善的IT运维管理是企业提高经营水平和服务水平的关键。

    运行/维护阶段与服务/支持阶段的分界线为前者是面向IT部门内部的管理,而后者是面向业务部门、企业中的其它人员或直接面向客户。

    更多相关内容
  • 非常全面的正则表达式的总结,可以把这个文档的内容当做一个工具使用,有问题的时候可以在里面查阅...一方面这个文档可以在疑惑的时候给我们填补正则表达式的知识,另一方面,里面涵盖丰富的案例,可以供我们粘贴复用
  • 计算机网络技术全篇 内容非常丰富 覆盖面广 不可多得的自学材料
  • jquery超级实用的代码段,内容非常丰富,涵盖了jquery在项目中的使用,通过无数个小案例的代码,可以让你能全面的学习到jquery的知识点,各种效果,以及功能的代码,应有尽有
  • 经典的C语言课件,内容详实,涵盖本科教学大纲内容;帮助初学者顺利掌握方法,把握C语言内容精髓,是难得学习辅导资料!
  • 以下这张图就是元一分享的干货内容,它基本涵盖了一个初级码农需要知道的所有基础入门知识。但这张图的目的并非用来吓人,这其中的所有技术名词,将以最通俗易懂的方式串联起来——即我们上网时的慢动作解析:打开一...
  • 全套python ppt

    2018-05-23 10:45:02
    涵盖知识点广 内容丰富 通俗易懂 内容不像其他资源下载打开就几张图片,保证不会后悔
  • 融汇了各个公司的笔试题,内容丰富。保你看了有帮助;
  • 《ASP.NET 4高级编程:涵盖C#和VB.NET(第7版)》内容简介: 在创建快速、安全的Web应用程序时,ASP.NET可以帮助您尽 可能高效地完成该任务。ASP.NET的每次版本更新都会较前一 版本有所改进,去除之前需要编写的许多...
  • 《ASP.NET3.5入门经典-涵盖C#和VB.NET》以建立一个实际的Web站点为主线,从最初的没有任何功能的简单站点开始,然后逐步增加功能和效果,直到最后建立一个完整的、功能丰富的、数据库驱动的、交互的Web站点。...
  • 工欲善其事必先利其器,这也是大部分开发者在日常工作...就在最近,一个基于 javascript 的可视化库 D3js(treemap 可视化)对 json 文件生成的技术图,给开发者提供了详细的各领域工具清单,内容涵盖了 11 种极具潜...

    通过公众号【计算机视觉联盟】可加博士微信(Kingsplus)交流,备注:单位/学校+研究方向 ,分享最新的AI思维导图和笔记

    笔记作者:王博简介         985AI博士,CSDN博客专家

    已连载系列《机器学习》西瓜书手推笔记

    已完结待更笔记:《深度学习-花书手推笔记》、《无人驾驶手推笔记》、《SLAM 十四讲》
    ————————————————
     

    工欲善其事必先利其器,这也是大部分开发者在日常工作中最重要开发原则。选择与开发内容相匹配的工具,常常会使我们事半功倍。但面对人工智能的多个领域,如:机器学习、深度学习、NLP等等,多样的工具有时也让我们也无从选择。

    就在最近,一个基于 javascript 的可视化库 D3js(treemap 可视化)对 json 文件生成的技术图,给开发者提供了详细的各领域工具清单,内容涵盖了 11 种极具潜力的 AI 工具类型,我们将其整理如下,强烈建议大家收藏~

    原文链接:https://github.com/haggaishachar/techmap

    目录:

    Ⅰ、经典机器学习(1-3)

    Ⅱ、深度学习(4-8)

    Ⅲ、强化学习(9-12)

    Ⅳ、自然语言处理(13-18)

    Ⅴ、语音识别(19-21)

    Ⅵ、计算机视觉(22-26)

    Ⅶ、分布式训练(27-31)

    Ⅷ、自动建模(32-35)

    Ⅸ、IDEs系统(36-38)

    Ⅹ、平台(39-41)

    Ⅺ、评分推理系统(42-43)

        I . 适用于经典机器学习的工具

    一、SciKit-learn  star 39.2k  fork 19.2k

    scikit-learn 是一种强大的基于 Python 语言的机器学习算法库(https://scikit-learn.org/stable/)。其中,包含了算法预处理,模型参数择优,回归与分类等算法,官方文档包含了每一种算法的例子,代码简洁优美,可视化了每一种算法结果,即能学习 python,也是帮助开发者更好理解机器学习算法的便利工具。

    尤其在监督学习部分,Scikit-learn 提供了广义线性模型、支持向量机、最近邻算法、高斯过程、朴素贝叶斯、决策树和集成方法等算法教程,同时还介绍了特征选择、随即梯度下降算法、线性与二次判别分析等在监督学习中非常重要的概念;而在半监督学习中的标签传播算法和无监督学习中的聚类与降维算法方面,也有非常多的教程。

    GitHub 地址:

    https://github.com/scikit-learn/scikit-learn 

     

    二、XGBoost star 18.3k  fork 7.3k

    xgboost 的全称是 eXtreme Gradient Boosting,它在 Gradient Boosting 框架下实现了 c++机器学习算法。

    XGBoost 最大的特点在于,它能够自动利用 CPU 的多线程进行并行,同时在算法上加以改进提高了精度。它是经过优化的分布式梯度提升库,可扩展性强,高效、灵活且可移植。

    GitHub 地址:

    https://github.com/dmlc/xgboost 

     

    三、Accord.NET star 3.7k  fork 1.7k

    Accord.NET Framework 是一个.NET 机器学习框架,结合了完全用 C#编写的音频和图像处理库(http://accord-framework.net/)。

    它可用于构建生产级计算机视觉、计算机试听、信号处理和统计应用程序甚至用于商业用途的完整框架,并为.NET 的应用程序提供了统计分析、机器学习、图像处理、计算机视觉相关的算法。

    GitHub 地址:

    https://github.com/accord-net/framework 

        II . 适用于深度学习的工具

    TensorFlow 2019 年相关数据

    四、TensorFlow star 141k  fork 79.8k

    TensorFlow 是用于机器学习的端到端开源平台(https://tensorflow.org),也是 2019 年度 GitHub 上最受欢迎的项目。

    它具有工具、库、社区资源全面且灵活的生态系统,提供稳定的 Python 和 C ++ API,以及其他语言的非保证向后兼容 API;能够帮助开发者们在 ML 领域的研究与发展,并使开发人员轻松构建和部署 ML 支持的应用程序。

    GitHub 地址:

    https://github.com/tensorflow/tensorflow 

     

    五、PyTorch star 35.8k  fork 9k

    作为 TensorFlow 强有力竞争对手的 PyTorch,也是目前较为主流的深度学习工具之一。

    PyTorch 是一个开源的机器学习框架,提供了两个高级功能,包括:具有强有力的 GPU 加速度的张量计算(如 NumPy),以及基于磁带自动调整系统构建的深度神经网络;可加快从研究原型到生产部署的过程。

    此前,OpenAI 官方宣布了「全面转向 PyTorch」的消息,计划将自家平台的所有框架统一为 PyTorch,也进一步体现了 PyTorch 在深度学习方面的潜力。

    GitHub 地址:

    https://github.com/pytorch/pytorch 

     

    六、MXNET star 18.4k  fork 6.5k

    MXNet 是一个功能齐全,可编程和可扩展的深入学习框架,支持最先进的深入学习模式(https://mxnet.apache.org/)。

    MXNet 提供了混合编程模型(命令式和声明式)和大量编程语言的代码(包括 Python、C++、R、Scala、Julia、Matlab 和 JavaScript)的能力,是一个易安装易上手的开源深度学习工具,它提供了一个 python 接口 gluon,能够让开发者迅速搭建起神经网络,并进行高效训练。

    GitHub 地址:

    https://github.com/apache/incubator-mxnet 

     

    七、Sonnet star 8.1k  fork 1.2k

    Sonnet 是由 DeepMind 发布的,在 TensorFlow 上用于构建复杂神经网络的开源库。

    Sonnet 主要用于让 DeepMind 开发的其它模型更容易共享,Sonnet 可以在内部的其它子模块中编写模块,或者在构建新模块时传递其它模型作为参数;同时,Sonnet 提供实用程序来处理这些任意层次结构,以便于使用不同的 RNN 进行实验,整个过程无需繁琐的代码改写。

    GitHub 地址:

    https://github.com/deepmind/sonnet 

     

    八、DL4J star 11.5k  fork 4.8k

    DL4J 是采用 java 和 jvm 编写的开源深度学习库,支持各种深度学习模型。DL4J 最重要的特点是支持分布式,可以在 Spark 和 Hadoop 上运行,它支持分布式 CPU 和 GPU 运行,并可以利用 Spark 在多台服务器多个 GPU 上开展分布式的深度学习模型训练,让模型运行更快。

    DL4J 的基本特性包括:DL4J 中的神经网络训练通过簇的迭代并行计算;整个过程由 Hadoop 和 Spark 架构支持;使用 Java 允许开发者在 Android 设备的程序开发周期中使用。

    GitHub 地址:

    https://github.com/eclipse/deeplearning4j 

        III . 适用于强化学习的工具

    九、Gym    star 19.6k  fork 5.5k

    Gym 是一个用于开发和比较强化学习算法的工具(https://gym.openai.com/)。

    它无需对 agent 的先验知识,并且采用 python 作为主要开发语言,因此可以简单的和 TensorFlow 等深度学习库进行开发集成,同时直观的将学习结果用画面直观的展示出来。Gym 库中包含许多可以用于制定强化学习算法的测试问题(即环境),这些环境有共享接口,允许编写通用的算法。

    GitHub 地址:

    https://github.com/openai/gym 

     

    十、Dopamine     star 8.7k  fork 1.1k

    一款基于 Tensorflow 的框架,旨在为新手和经验丰富的强化学习研究人员提供兼具灵活性、稳定性和可重复性的新工具。

    该框架的灵感来源于大脑中奖励-动机行为的主要成分「多巴胺受体」,这反映了神经科学与强化学习研究之间的强大的历史联系,是一个强化学习算法快速原型的研究框架。

    GitHub 地址:

    https://github.com/google/dopamine 

     

    十一、ReAgent    star 2.4k  fork 312

    Facebook 推出的一个构建决策推理系统的模块化端到端平台,用于推理系统(强化学习、上下文管理等), 可以显著简化推理模型构建过程。

    ReAgent 由三部分组成:生成决策并接收决策反馈的模型、用于评估新模型部署前性能的模块及快速迭代的服务平台。同时,ReAgent 也是创建基于 AI 的推理系统的最全面、模块化开源平台,并且是第一个包含策略评估的平台,将会加速相关决策系统的部署。

    GitHub 地址:

    https://github.com/facebookresearch/ReAgent 

     

    十二、Tensorlayer   star 5.9k  fork 1.3k

    这是一个面向科学家的深度学习和强化学习库。TensorLayer 由底层到上层可以分为三大模块:神经网络模块、工作流模块、应用模块。

    与 Keras 和 Pytorch 相比,TensorLayer 提高了神经网络模块的抽象化设计,同时实现了降低使用现有层和开发新层的工作量。

    GitHub 地址:

    https://github.com/tensorlayer/tensorlayer 

        IV . 适用于自然语言处理的工具

    十三、BERT   star 21.3k  fork 5.8k 

    BERT 是一个基于双向 Transformer 的大规模预训练语言模型,用于对大量未标记的文本数据进行预训练,以学习一种语言表示形式,这种语言表示形式可用于对特定机器学习任务进行微调。

    BERT 被称为是 NLP 领域中里程碑的进展;目前,BERT 也是 NLP 深度学习中的重要组成部分,很多之后的自然语言处理模型都是在此基础上优化与改进而得。

    GitHub 地址:

    https://github.com/google-research/bert 

     

    十四、Transformers  star 21.7k  fork 4.8k

    Transformers 是神经机器翻译中使用的一种神经网络,它主要涉及将输入序列转换为输出序列的任务,这些任务包括语音识别和文本转换语音。

    这类任务需要「记忆」,下一个句子必须与前一个句的上下文相关联(这是相当关键的),以免丢失重要的信息。通过将 attention 应用到正在使用的单词上,则可以解决当句子太长的时,RNN 或 CNN 无法跟踪上下文和内容的问题。

    GitHub 地址:

    https://github.com/huggingface/transformers 

     

    十五、AllenNLP    star 8k  fork 1.7k

    一个基于 PyTorch 的 NLP 研究库,利用深度学习来进行自然语言理解,通过处理低层次的细节、提供高质量的参考实现,能轻松快速地帮助研究员构建新的语言理解模型。

    AllenNLP 能让设计和评估新的深度学习模型变得简单,几乎适用于任何 NLP 问题,通过利用一些基础组件,你可以轻松地在云端或是你自己的笔记本上跑模型。

    GitHub 地址:

    https://github.com/allenai/allennlp 

     

    十六、flair    star 8.1k  fork 1k

    一款简单易用的 Python NLP 库,允许将当前最优自然语言处理(NLP)模型应用于文本,如命名实体识别(NER)、词性标注(PoS)、词义消歧和分类。

    Flair 基于 Pytorch 的 NLP 框架,它的接口相对更简单,允许用户使用和结合不同的词嵌入和文档嵌入,包括 Flair 嵌入、BERT 嵌入和 ELMo 嵌入。

    GitHub 地址:

    https://github.com/flairNLP/flair 

     

    十七、spaCy    star 15.7k  fork 2.8k

    这是一个具有工业强度级的 Python 自然语言处理工具包。

    它已经成为 Python 中最广泛使用的工业级自然语言库之一,它提供了当前最佳的准确性和效率,并且有一个活跃的开源社区支持。

    GitHub 地址:

    https://github.com/explosion/spaCy 

     

    十八、fastText   star 20.5k  fork 3.9k

    FastText 是 Facebook 人工智能研究实验室(FAIR)开源的一个文本处理库,他是一个专门用于文本分类和外文本表示的库,用于高效文本分类和表示学习。

    fastText 的核心是使用「词袋」的方式,不管文字的顺序;但它不是线性的,而是使用分层分类器来将时间复杂度降低到对数级别,并且在具有更高分类数量的大数据集上更高效。

    GitHub 地址:

    https://github.com/facebookresearch/fastText

        V . 适用于语音识别的工具

    十九、Kaldi  star 8.2k  fork 3.7k

    Kaldi 是目前使用广泛的开发语音识别应用的框架。

    该语音识别工具包使用了 C ++编写,研究开发人员利用 Kaldi 可以训练出语音识别神经网路模型,但如果需要将训练得到的模型部署到移动端设备上,通常需要大量的移植开发工作。

    GitHub 地址:

    https://github.com/kaldi-asr/kaldi 

     

    二十、DeepSpeech star 13k  fork 2.4k

    DeepSpeech 是一个开源语音转文本引擎,使用基于百度深度语音研究论文的机器学习技术训练的模型。其中,该项目运用到了 Google 的 TensorFlow 来简化实施过程。

    GitHub 地址:

    https://github.com/mozilla/DeepSpeech 

     

    二十一、wav2letter   star 4.8k  fork 770

    这是由 Facebook 人工智能研究院发布的首个全卷积自动语音识别工具包,它是一个简单高效的端到端自动语音识别(ASR)系统。

    wav2letter 的核心设计基于三个关键原则,包括:实现在包含成千上万小时语音数据集上的高效模型训练;简单可扩展模型,可以接入新的网络架构、损失函数以及其他语音识别系统中的核心操作;以及平滑语音识别模型从研究到生产部署的过渡。

    GitHub 地址:

    https://github.com/facebookresearch/wav2letter 

        VI . 适用于计算机视觉的工具

    二十二、YOLO  star 16.2k  fork 10.4k

    YOLO 是当前深度学习领域解决图像检测问题最先进的实时系统。在检测过程中,YOLO 首先将图像划分为规定的边界框,然后对所有边界框并行运行识别算法,来确定物体所属的类别。确定类别之后,YOLO 再智能地合并这些边界框,在物体周围形成最优边界框。

    这些步骤全部并行进行,因此 YOLO 能够实现实时运行,并且每秒处理多达 40 张图像。据官网显示,在 Pascal Titan X 上,它以 30 FPS 的速度处理图像,并且在 COCO 测试开发中的 mAP 为 57.9%。

    GitHub 地址:

    https://github.com/allanzelener/YAD2K 

     

    二十三、OpenCV    star 41.9k  fork 32.4k

    OpenCV 是英特尔开源的跨平台计算机视觉库(https://opencv.org),被称为 CV 领域开发者与研究者的必备工具包。

    这是一套包含从图像预处理到预训练模型调用等大量视觉 API 的库,并可以处理图像识别、目标检测、图像分割和行人再识别等主流视觉任务。其最显著的特点是它提供了整套流程的工具,因此开发者无需了解各个模型的原理就能用 API 构建视觉任务。它具备 C++、Python 和 Java 接口,支持 Windows、Linux、Mac OS、iOS 和 Android 系统。

    GitHub 地址:

    https://github.com/opencv/opencv 

     

    二十四、Detectron2   star 7.7k  fork 1.4k

    Detectron2 则是 PyTorch 1.3 中一重大新工具,它源于 maskrcnn 基准测试,也是对先前版本 detectron 的一次彻底重写。

    Detectron2 通过全新的模块化设计,变得更灵活且易于扩展,它能够在单个或多个 GPU 服务器上提供更快速的训练速度,包含了更大的灵活性与扩展性,并增强了可维护性和可伸缩性,以支持在生产中的用例。

    GitHub 地址:

    https://github.com/facebookresearch/detectron2 

     

    二十五、OpenPose   star 15.9k  fork 4.7k

    OpenPose 人体姿态识别项目是美国卡耐基梅隆大学(CMU)基于卷积神经网络和监督学习并以 caffe 为框架开发的开源库。

    它可以实现人体动作、面部表情、手指运动等姿态估计。适用于单人和多人,具有极好的鲁棒性。是世界上首个基于深度学习的实时多人二维姿态估计应用,很多人体姿态估计实例都是基于它实现,如动作采集、3D 试衣、绘画辅助等。

    GitHub 地址:

    https://github.com/CMU-Perceptual-Computing-Lab/openpose 

     

    二十六、facenet   star 10k  fork 4.1k

    FaceNet 采用了深度卷积神经网络(CNN)学习将图像映射到欧式空间,也被称为通用人脸识别系统。

    该系统可从人脸中提取高质量的特征,称为人脸嵌入(face embeddings),可用于训练人脸识别系统,从而实现对人脸的验证。它在 LFW 数据集上测试的准确率达到了 99.63%,在 YouTube Faces DB 数据集上准确率为 95.12%。

    GitHub 地址:

    https://github.com/davidsandberg/facenet 

        VII . 适用于分布式训练的工具

    二十七、Spark MLlib   star 25.1k  fork 21.1k

    Spark 是一个开源集群运算框架,也是现在大数据领域热门开源软件之一(https://spark.apache.org/mllib/)。

    由于 Spark 使用了内存内运算技术,它在内存上的运算速度比 Hadoop MapReduce 的运算速度快上 100 倍;这也使得 Spark MLlib 分布式计算框架运行非常高效、快速。它可以实现大部分机器学习,如:聚类、分类、回归等算法,并允许将数据加载至集群内存,多次对其进行查询,所以非常适合用于机器学习算法。

    GitHub 地址:

    https://github.com/apache/spark 

     

    二十八、Mahout  star 1.8k  fork 930

    Mahout 是一个分布式线性代数框架,用于快速创建可扩展的高性能机器学习应用程序(http://mahout.apache.org/  )。

    Mahout 框架长期以来一直与 Hadoop 绑定,但它的许多算法也可以在 Hadoop 之外运行。它允许多种算法可以跨越分布式 Spark 群集上运行,并且支持 CPU 和 GPU 运行。

    GitHub 地址:

    https://github.com/apache/mahout 

     

    二十九、Horovod   star 8.5k  fork 1.3k

    这是由 Uber 开源的一个跨多台机器的分布式深度学习的 TensorFlow 训练框架,可以使分布式深度学习快速且易于使用。

    据介绍,Horovod 让开发人员只需几行代码就可以完成任务。这不仅加快了初始修改过程,而且进一步简化了调试。考虑到深度学习项目的高度迭代性,这也可以节省大量时间。除此之外,它还结合了高性能和修补低级模型细节的能力,例如:同时使用高级 api,并使用 NVIDIA 的 CUDA 工具包实现自己的自定义操作符。

    GitHub 地址:

    https://github.com/horovod/horovod 

     

    三十、Dask   star 6.2k  fork 994

    当开发者需要并行化到多核时,可以用 Dask 来将计算扩展到多个内核甚至多个机器。

    Dask 提供了 NumPy Arrays,Pandas Dataframes 和常规列表的抽象,能够在无法放入主内存的数据集上并行运行。对大型数据集来说,Dask 的高级集合是 NumPy 和 Pandas 的替代方案。

    GitHub 地址:

    https://github.com/dask/dask 

     

    三十一、Ray   star 10.3k  fork 1.5k

    Ray 是一个高性能分布式执行框架,它使用了和传统分布式计算系统不一样的架构和对分布式计算的抽象方式,用于快速而简单的构建和运行分布式应用程序。

    Ray 按照典型的 Master-Slave 进行设计。其中,Master 负责全局协调和状态维护,Slave 执行分布式计算任务。不过和传统的分布式计算系统不同的是,Ray 使用了混合任务调度的思路,性能更强。

    GitHub 地址:

    https://github.com/ray-project/ray 

        VIII . 适用于自动建模的工具

    三十二、TPOT  star 6.7k  fork 1.2k

    TPOT 是一个 Python 编写的软件包,利用遗传算法行特征选择和算法模型选择,仅需几行代码,就能生成完整的机器学习代码。

    在机器学习模型开发图中,TPOT 所完成的即通过利用遗传算法,分析数千种可能的组合,为模型、参数找到最佳的组合,从而自动化机器学习中的模型选择及调参部分。

    GitHub 地址:

    https://github.com/EpistasisLab/tpot 

     

    三十三、AutoKeras   star 6.6k  fork 1.1k

    它使用了高效神经架构搜索(ENAS,https://arxiv.org/abs/1802.03268),只需使用 pip install autokeras 就能快速轻松地安装软件包,然后就能用自己的数据集来执行自己的架构搜索构建思路。

    相比谷歌 AutoML,两者构建思路类似,但不同的是,AutoKeras 所有代码都已经开源,可供开发者无偿使用。

    GitHub 地址:

    https://github.com/keras-team/autokeras 

     

    三十四、Featuretools  star 4.6k  fork 602

    这是一个用于自动化特性工程的开源 python 框架(https://www.featuretools.com/)。

    它可以帮助开发者从一组相关数据表中自动构造特征。开发者只需要知道数据表的基本结构和它们之间的关系,然后在实体集(一种数据结构)中指明。然后在有了实体集之后,使用一个名为深度特征合成(DFS)的方法,在一个函数调用中构建出数千个特征。

    GitHub 地址:

    https://github.com/FeatureLabs/featuretools 

     

    三十五、NNI   star 5.3k  fork 683

    NNI 是由微软发布的一个用于神经网络超参数调整的开源 AutoML 工具包,也是目前较为热门的 AutoML 开源项目之一。

    最新版本的 NNI 对机器学习生命周期的各个环节做了更加全面的支持,包括:特征工程、神经网络架构搜索(NAS)、超参调优和模型压缩,开发者都能使用自动机器学习算法来完成,即使是开发小白也能轻松上手。

    GitHub 地址:

    https://github.com/microsoft/nni 

     

    三十六、AdaNet    star 3k  fork 443

    AdaNet 是由谷歌开源的一个轻量级的基于 TensorFlow 框架(https://adanet.readthedocs.io/en/v0.8.0/)。

    AdaNet 易于使用,并能创建高质量的模型,为 ML 实践者节省了用于选择最佳神经网络架构的时间,实现了一种将学习神经架构作为子网络集合的自适应算法。

    GitHub 地址:

    https://github.com/tensorflow/adanet 

        IX . IDEs 系统

    三十七、Jupyter   star 9.3k  fork 2.2k

    Jupyter 是一种 Web 应用,涵盖了跨数十种编程语言的交互式计算。

    它能让用户将说明文本、数学方程、代码和可视化内容全部组合到一个易于共享的文档中,非常方便研究和教学。在数据挖掘平台 Kaggle 上,使用 Python 的数据开发者大多数选择了 jupyter 来实现分析和建模的过程。

    GitHub 地址:

    https://github.com/jupyter/jupyter 

     

    三十八、Spyder    star 5.1k  fork 1k

    Spyder 是一个 用于科学计算的使用 Python 编程语言的集成开发环境(IDE)。

    它结合了综合开发工具的高级编辑、分析、调试功能以及数据探索、交互式执行、深度检查和科学包的可视化功能,对于初学者也非常友好。

    GitHub 地址:

    https://github.com/spyder-ide/spyder 

     

    三十九、Zeppelin  star 4.6k  fork 2.2k

    Zeppelin 是一款基于 Web 的交互式数据分析平台。它基于网络的笔记本,默认使用 Spark 集群作为分析引擎,提供数据可视化的框架,支持数据驱动的交互式数据分析。

    通过配置,它也支持包括 SQL、Python、R 等多种数据分析语言,提供数据库查询、动态图表展示、地图等数据可视化能力,并能够以 Notebook 的形式保存和分发代码及分析结果。

    GitHub 地址:

    https://github.com/apache/zeppelin 

        X . 平台

    四十、H2O  star 4.6k  fork 1.7k

    H2O 是  H2O.ai 公司的完全开源的分布式内存机器学习平台。H2O 同时支持 R 和 Python,支持最广泛使用的统计和机器学习算法,包括梯度提升(Gradient Boosting)机器、广义线性模型、深度学习模型等。

    H2O 包括一个自动机器学习模块,使用自己的算法来构建管道。它对特征工程方法和模型超参数采用了穷举搜索,优化了管道。H2O 自动化了一些最复杂的数据科学和机器学习工作,例如特征工程、模型验证、模型调整、模型选择 和 模型部署。除此之外,它还提供了自动可视化以及机器学习的解释能力(MLI)。

    GitHub 地址:

    https://github.com/h2oai/h2o-3

     

    四十一、MLflow  star 5.9k  fork 1.2k

    MLflow 是机器学习生命周期的开源平台,开放接口,可与任何机器学习库、算法、部署工具或编程语言一起使用,基于 REST API 和简单的数据格式而构建。是一个开源项目,允许用户和机器学习库开发人员可以对其进行扩展。

    MLflow 现 alpha 版,提供跟踪、项目和模型三大组件。MLflow 的跟踪组件支持记录和查询实验数据,如评估度量指标和参数。MLflow 的项目组件提供了可重复运行的简单包装格式。最后,MLflow 的模型组件提供了用于管理和部署模型的工具。

    GitHub 地址:

    https://github.com/mlflow/mlflow 

     

    四十二、Kubeflow   star 8.3k  fork 1.3k

    Kubeflow 项目旨在使 Kubernetes 上的机器学习变的轻松、便捷、可扩展,其目标不是重建其他服务,而是提供一种简便的方式找到最好的 OSS 解决方案。对分布式训练任务支持。

    用于创建和管理交互式 Jupyter notebook 的 JupyterHub,可配置为使用 CPU 或 GPU,并通过单一设置调整至单个集群大小的 TensorFlow 训练控制器(Tensorflow Training Controller),用于 TF 服务容器(TF Serving container)

    GitHub 地址:

    https://github.com/kubeflow/kubeflow 

        XI . 评分推理系统

    四十三、ONNX  star 7.8k  fork 1.3k

    ONNX 是一种针对机器学习所设计的开放式的文件格式,用于存储训练好的模型。它使得不同的人工智能框架(如 Pytorch, MXNet)可以采用相同格式存储模型数据并交互。ONNX 的规范及代码主要由微软,亚马逊,Facebook 和 IBM 等公司共同开发,以开放源代码的方式托管在 Github 上。

    目前官方支持加载 ONNX 模型并进行推理的深度学习框架有:Caffe2, PyTorch, MXNet,ML.NET,TensorRT 和 Microsoft CNTK,并且 TensorFlow 也非官方的支持 ONNX。

    GitHub 地址:

    https://github.com/onnx/onnx 

     

    四十四、Seldon star 1.4k  fork 296

    开源机器学习部署平台 Seldon Core,让机器学习模型可以部署于 Kubernetes 上。Seldon Core 的目标,要让研究人员可以用任何工具包、程序语言建立机器学习模型。

    现阶段该工具支持模型包含以 Python 为基础的 TensorFlow、Sklearn,还有 Spark、H2O、R 等知名模型。此外,Seldon Core 也让机器学习模型可支援 REST、gRPC,让使用者可以更简单地整合相关企业应用。

    GitHub 地址:

    https://github.com/SeldonIO/seldon-core 

    展开全文
  • 这是第六版的介绍《ASP.NET 4入门经典:涵盖C#和VB.NET(第6版)》内容简介:ASP.NET是.NET Framework的一部分,用于构建内容丰富的动态Web站点。其最新的版本ASP.NET 4对上一版进行了许多改进,包括增强了Web窗体,并...
  • 有关排队论的一点重要资料,很值得一看!涵盖内容比较全面
  • 强烈推荐你先看看我整理的这份 GitHub 上星标 115k+ 的 Java 教程,里面涵盖了 Java 所有的知识点,包括 Java 语法、Java 集合框架、Java IO、Java 并发编程和 Java 虚拟机,内容不多,只讲重点。 GitHub 星标 115k+...

    大家好,我是二哥呀!

    之前在送书的时候做了一个小调查,问题是:“你是怎么认识二哥的?”

    我以为从知乎上了解的多一些,没想到,CSDN 上的最多,看来二哥还是在 CSDN 上更有影响力一些,这个结果多少让我感到有些意外,因为我最近在知乎上更新得更勤快一些。

    写这篇文章的时候,我去 CSDN 上看了一眼我的主页。访问量突破了 900 万

    按照目前的增长速度来看,年底突破 1000 万访问量应该没啥大问题。另外还有一些数据我觉得也挺牛逼的:

    • 原创文章数量 957 篇;
    • 作者总榜第 12 名;
    • 作者周榜第 1 名;
    • 粉丝数量 26.8 万;
    • 4.6 万次点赞;
    • 1.3 万次评论;
    • 13 万次收藏。

    随着时间的推移,发布的文章数量越来越多,我相信这个数据还会蹭蹭蹭地往上爬。

    我在 CSDN 上更新文章的记录可以追溯到上古时代,也就是 2010 到 2011 年的时候,我在苏州的一家外企实习,主要做 Flex 开发,文章库存里还有这样一篇:如何在 Flex 的文本域里显示图片和文字。

    内容我点开看了一下,是真的水!比小学生日记还水!

    从上面的记录上来看,我更新了 5 篇之后就没再坚持。直到 2014 年我回了洛阳之后才重新开始更新。

    内容依然青涩无比,简直没法看,主要是一些读书笔记和对工作内容的记录。看到 Java 操作 DBF 文件数据库这个标题,往事就像窗外的风一样,轻轻地爬过窗户,然后拍了拍我的脑袋

    回洛阳后,我在一家培训机构做了讲师。后来公司想拓展业务,就成立了软件开发部,我就转到这个部门了。我们同时做了三个产品,一个是党建,一个是大宗期货交易(主要由我来负责),还有一个名字忘记了,也是对接的政府部门。

    有玩过大宗期货交易的吗?和股票有些类似,但又有很大的不同。软件里有这样一块内容,类似下图,行情会实时地变化——涨了多少,跌了多少。

    这个行情的数据会实时写入到一个 DBF 文件,然后另外一个软件会从这个文件里读取数据,展示成 K 线图,类似下图这种。

    这个大宗期货交易软件大概做了两年的时间,期间对接过三家小型交易所(每个交易所的玩家在 100 人左右),不得不承认,有些玩期货的是真的有钱,我见过单日最大的一笔入金有 50 万。

    找我们开发这个软件的老板给我吹过,说这玩意如果稳定了,肯定能挣好多好多钱,他自己就是因为之前给别的交易所做指导挣了很多钱,我天真地就信了。

    后来在老板的怂恿下,就从培训机构这边出来和老板创业了。在西苑桥的东方今典写字楼租了一个 90 平左右的办公室,装修的像模像样的。然后我又拉了几个同事过来,就算是稀里糊涂的创业了。

    可是,等这个期货交易软件稳定了(性能优化好了,工商银行、华夏银行这些结算中心也对接了),因为一些特殊的原因,很多交易所都被关停了!这就意味着,我的第一次创业梦,基本上宣告失败了。

    2016 年的上半年,我们转型做了新零售。也就是这个时候,很多出版社通过 CSDN 找到了我,要约稿,我记得很清楚,第一家找过来的是电子工业出版社。

    虽然已经是博客专家,但我知道自己几斤几两,根本就没到出版技术图书的水平,所以我就拒绝了。我那时候特别崇拜一个技术博主,叫安晓辉,他出版了很多技术图书,我都买了。

    前几天,有个同学非要让我收他做徒弟。

    当时我就笑了,一种似曾相似的感觉涌上心头,我也这么问过安晓辉!不过,安晓辉同样拒绝了我,哈哈哈哈哈。

    其实成长就是这样的,一开始,我们总想找个师傅带一带,好走一条捷径,但归根结底,计算机专业靠的就是自学,不管你是科班的还是非科班的

    如果你要学习物理,我推荐你顺着物理的发展史学习,先学习牛顿经典物理,再学习热力学、电磁学,再学习相对论量子力学这些彻底推翻经典物理的,再学习电动力学这种硬核的。

    整个学习过程,是自底向上的。

    但是学计算机,自底向上还行得通吗?

    先学习电路,然后学习冯诺依曼结构,造一台计算机?然后再用汇编写个 mini os ?写个简易版的编译器?最后再学习高级编程语言?

    你要这么学,必然被劝退!

    计算机的学习最好是自顶向下

    什么是顶?

    我认为就是从一门编程语言开始,如果你学习能力比较强,就从 C/C++ 开始,以后可以去腾讯,或者去对性能要求比较高的后端公司;如果你想尽快找到工作,就从Java开始,因为Java岗位目前是最多的,是其他编程语言不能相提并论的。

    怎么学习Java呢?强烈推荐你先看看我整理的这份 GitHub 上星标 115k+ 的 Java 教程,里面涵盖了 Java 所有的知识点,包括 Java 语法、Java 集合框架、Java IO、Java 并发编程和 Java 虚拟机,内容不多,只讲重点。

    GitHub 星标 115k+的 Java 教程,超级硬核!

    这也是我一直给你推荐的一份学习资料,对于初学者来说,这就是最好的一副鸟瞰图,通过这份学习资料,基本上就知道Java要学习的重点是什么,有一个很清晰的认知。如果有些内容过于简练,其实可以按照主题去搜对应的主题文章,比看书或者看视频要来得快得多!可以通过下图感受一下。


    2016-2018 年的时候,我写了蛮多前端的博客,因为创业嘛,前后端我都要做,这也是后来出版《Web 全栈开发进阶之路》这本书的雏形。

    随着博客的浏览量越来越大,找过来的出版社就越来越多,其中有一家出版社的编辑,和我是老乡,拒绝了他很多次,他总是不死心,隔三差五就来找我,非要让我写,他说出版书可以让我:

    • 获得身份标签
    • 完善知识体系
    • 稿费收入
    • 带来更多的可能性

    说久了我就动心了,

    既然下定决心要写,那就要投入巨大的精力。创作的过程是艰辛的,虽然我有了一些写博客的经验,但写书和写博客有着很大的差距。博客可以随心所欲,想到哪里写到哪里,但书的内容一定要系统化,讲究循序渐进。

    俗话说:“万事开头难。”的确啊,当初为了梳理出来一个完整的书稿目录,我可是费了老大的劲——前前后后足足耗了两个月的时间,差一点没憋出来。那时候虽然我写过 300 多篇的博客,但大多数都是很零散的、即兴的、笔记性质的,构不成一套完整的体系;另外就是博客的质量也参差不齐,很难直接拿来作为书稿的素材。

    编辑老师告诉我,如果目录整理出来的话,基本上书稿就完成 80% 的工作量了。然而事实证明,编辑老师这句话是忽悠我的,事情远远没有想象中的那么简单。

    具体有多难,就不再啰嗦了。

    最终交稿的时间是 2018 年 10 月份,我是 2017 年 5 月份开始准备的,前后经历了 1 年多的时间。算不上呕心沥血,但绝对算是尽心尽责。

    交了稿后,我的任务基本完成了,后面的任务就由出版社接手了,他们负责审核、校对、排版、设计封面、印刷,最终在 2019 年的 4 月份开始预售。

    当时的宣传海报是这样的。

    说句实在话,在 CSDN 上写博客之前,我从来没想过自己会出版书,更没想过,自己的博客访问量能达到 900 万。还有,更重要的是,二哥在无形当中竟然帮助了这么多的读者,简单截个图吧!


    嗯,文章的最后,给 CSDN 站下台吧!

    CSDN 推出的《程序员》杂志重新起航了,《新程序员》立足于行业前沿,深度探索技术未来,通过音视频、图文专栏等丰富的多媒体形式为载体,全方位解读技术与产业,为中国开发者打开新时代的技术之门。

    另外,CSDN 的负责人还给二哥的读者免费赠送了 15 本。

    赠送的规则非常简单,你可以去我新发得一篇文章里去留言,如果你是老读者,获奖得纪律会特别大!

    900万!!!!!!!!!!!!!!!!!!!!!!!!

    来吧!

    展开全文
  • 《ASP.NET 4高级编程:涵盖C#和VB.NET(第7版)》内容简介:在创建快速、安全的Web应用程序时,ASP.NET可以帮助您尽可能高效地完成该任务。ASP.NET的每次版本更新都会较前一版本有所改进,去除之前需要编写的许多繁琐的...
  • 《ASP.NET 4高级编程:涵盖C#和VB.NET(第7版)》内容简介:在创建快速、安全的Web应用程序时,ASP.NET可以帮助您尽可能高效地完成该任务。ASP.NET的每次版本更新都会较前一版本有所改进,去除之前需要编写的许多繁琐的...
  • 牛逼!Java 从入门到精通,超全汇总版

    万次阅读 多人点赞 2021-05-06 19:40:33
    在讲解过程中,不仅搭配了丰富的图片,而且理论结合实例,用 Java 语言编写代码实现了设计模式的程序,让程序真正地运行起来,并提供了运用模式解决具体问题的练习题和答案。除此以外,本书在必要时还对 Java 语言的...

    文章目录


    (文末有惊喜哦!!!)

    其实学习 Java 学到什么程度算是精通,这个其实没有盖棺定论的,也不是说你拿个年薪几十万的 offer 就可以自诩精通了。另外,每当面试的时候简历上填个精通 offer 的家伙我就觉得很搞笑,没有几个熬得过开出门左拐的命运。但是我认为,如果市面上这些资料、书籍你都啃的差不多,你能在所有的 Java 程序员中跻身前 0.1% 的话,你就可以达到"精通" 这个阶段了,因为没人比你强了,你当然是精通了。

    所以,我还是选择罗列一些知识点推荐给大家,如果你都能够掌握并且真正理解这些东西的话,那你就可以到了精通这个阶段了。

    首先要学的是计算机基础知识,因为 Java 不是像 Python 那样简单,它是需要一定基础的,如果你上来直接硬肝 Java,那么 90% 的几率你会放弃。

    因为要想学好 Java ,你就得理解什么是面向对象的设计思想,而面向对象的这种设计思想又不是刚开始学习编程的新人能够熟练掌握呢?那怎么办呢?这不是死局了吗?

    其实,如果要想真正理解这种设计思想的话,你要首先学的不是 Java,而是 C 语言。

    为什么呢?因为 C 语言是面向过程的,什么是面向过程和面向对象的设计思想呢?我给你举个例子你就知道了。

    面向过程与面向对象的区别,由“如何把大象装进冰箱”来看:

    一、面向过程

    为了把大象装进冰箱,需要3个过程。

    思路:

    1、把冰箱门打开(得到打开门的冰箱)。

    2、把大象装进去(打开门后,得到里面装着大象的冰箱)。

    3、把冰箱门关上(打开门、装好大象后,获得关好门的冰箱)。

    根据上面的思路,可以看到,每个过程都有一个阶段性的目标,依次完成这些过程,就能把大象装进冰箱。

    二、面向对象

    为了把大象装进冰箱,需要做三个动作(或者叫行为)。每个动作有一个执行者,它就是对象。

    思路:

    1、冰箱,你给我把门打开。

    2、冰箱,你给我把大象装进去(或者说,大象,你给我钻到冰箱里去)。

    3、冰箱,你给我把门关上。

    依次完成这些动作,你就可以把大象装进去。

    这里我只是举个例子,可能大家还是很懵逼,这里我就要给你推荐几本入门 C 语言的视频和书籍了。

    关于书籍推荐,可以看看这篇回答

    初学C语言,有什么好书推荐?

    书一般是能够静下心来的人看的,一般初学者最大的问题就是很难静下心来编程,如果你觉得难以看得下去书的话,你可以看看这篇回答,里面的视频可以说很全了

    有哪些优秀的c语言课程视频?

    初学 C 语言周期大概是3 - 6 个月,学编程的捷径就是每天敲代码,比如 C primer plus 上面就有很多代码示例,你要对着敲,课后练习要跟着做,坚持 3 - 6 个月,你会感谢你自己的坚持。

    学到这里,你就可以说 C 语言基本入门了。

    如果 C 语言你能够坚持下来的话,那么 Java 入门,那会非常容易了,其原因有两点

    1. C 语言基本上可以说是高级语言的鼻祖,如果你 C 学得好,那么学其他语言都会非常容易。
    2. C 语言比 Java 稍微难点,而且有很多特性非常像,从一门比较难的语言 -> 一门难度中等的语言,那会变得很容易。

    好了,那么从现在开始,我们就要进入 Java 的学习环节了。

    学习 Java,我将会从三个阶段来介绍,分为初级、中级和高级

    Java 基础

    什么是初级 Java 的水平呢?我认为就是理解 Java 的语法规则、语言特性,这么说有点干瘪,直接上思维导图!

    img

    就这一张图,如果你能把图中内容都理解的差不多,那你就可以说是入门 Java 了,但是这里要注意一个概念,这并不等于说你是一个合格的初级 Java 程序员了,因为要想达到初级 Java 程序员的水平,你要会能干活,能干活的标准是你要懂框架,不要急,我们后面会说。

    有人问图中为什么没有并发或者 Java 虚拟机这些,这些属于中高级内容,刚开始学 Java 不用懂什么并发和 JVM!!!有一些人或者培训班都喜欢秀自己懂 xxx ,懂 xxx ,这不就是误导小白么。

    那么话又说回来了,如何才能学习并了解到上面这些内容呢?接下来重点来了!!!

    如果你能看到这里,我就认为你养成了每日编程的习惯,此时的你能够静下心来编程了。

    那么我首先给你推荐一本初学 Java 非常合适的一本书

    Head First Java

    《Head First Java》是本完整的面向对象(object-oriented,OO)程序设计和Java的学习指导。此书是根据学习理论所设计的,让你可以从学习程序语言的基础开始一直到包括线程、网络与分布式程序等项目。最重要的,你会学会如何像个面向对象开发者一样去思考。

    img

    书中涉及的 Swing 图形化接口和 GUI 这部分可以不用学习,或者作为简单了解,因为现在几乎很少有人 拿 Swing 开发桌面化程序。

    这本书可以说是非常适合小白的一本了,零基础就可以看,Head First 系列的书籍一般都是语言诙谐幽默,读起来不累,而且书中有非常多锻炼思维的游戏/方法,对于有经验的人来说,看这本书感觉非常弱智,但是对于零基础或者 Java 新手来说,这是一本非常适合系统学习 Java 和查漏补缺的一本书。

    Java 核心技术卷一

    有人把 Java 核心技术卷一作为入门书籍推荐,其实我觉得并不友好,虽然这也是一门基础书籍,但是对不同的人来说,这本书的接收程度不同,我推荐看完上面的 Head First Java 再看这本。

    img

    Java 编程思想

    Java 编程思想就是一本神书了,不管你是初、中还是高级程序员,你每次看这本书的时候都会有新的收获

    img

    这本书同样不适合刚开始入门 Java 的同学看,甚至前三章并不友好,因为 Java 编程思想只是讲面向对象过程的设计思想就用了很大篇幅,这本书包含很多示例代码,我强烈推荐你要学习里面的代码思想,到工作中,这些编码思想和代码规范会非常有用!!!

    所以综上所述,入门 Java 你需要掌握的基础知识有

    这里就需要区分不同的电脑类型了,一种是 Mac ,一种是 Windows,很少有直接拿 Linux 进行开发的,所以我们这里不探讨 Linux 的方式

    Mac 上的相关配置可以看这篇

    Windows 上的相关配置可以看这篇

    • 编写入门 Java 程序

    这里你需要使用集成开发工具,一种是 Eclipse 、一种是 IDE,初学者建议使用 Eclipse,因为 IDE 对新手并不友好。

    Eclipse下载与安装

    Java 入门程序编写

    好了,如果你能按照上面的步骤一步步走下来,那么恭喜你,你能够成功编写一个 Java 入门程序了。

    现在,你就可以进入到 Java 相关知识点的学习了。

    • 了解面向对象的设计思想

    首先,你需要先认识到什么是面向对象的设计思想。

    这里我推荐你看一下 《Java编程思想》 的第一章和二章

    知乎的这个回答也能帮助你理解 什么是面向对象编程思想?

    关于 Java 变量,可以参考这篇文章

    Java 中的变量有很多,很容易让初学者不知所措,这里我写了一篇 Java 变量解惑的相关文章

    Java 中到底有哪几种变量

    上面所有的内容和思维导图,都可以在这篇文中获取

    Java技术核心总结 PDF 下载

    上面都是以文章方向为主的自学流程,下面是视频方向的自学流程。

    一、Java基础 1、尚硅谷宋红康(强力推荐):

    尚硅谷宋红康Java基础教程(java入门神器、配套资料齐全)_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili

    2、黑马Java基础+就业班+各种项目idea版本(推荐):

    黑马Java基础+就业班+各种项目idea版本(正在更新)_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili

    3、动力节点Java零基础教程视频:

    Java零基础教程视频(适合Java 0基础,Java初学入门)_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili

    4、北京尚学堂高琪(推荐):

    高淇老师应各位网友要求又更新了JAVA300集_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili

    5、求知讲堂:2019求知讲堂零基础Java入门编程视频教程 高口碑 无废话 无尿点 :

    2019求知讲堂零基础Java入门编程视频教程 高口碑 无废话 无尿点_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili

    6、尚硅谷Java8新特性+JUC+NIO:

    尚硅谷Java8新特性+JUC+NIO_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili

    如果你能掌握上面的基础内容部分,我觉得你应该花至少 3 - 6 个月,如果你能坚持下来的话,这里我需要鼓励一下你,但是不要自满,因为这才只是最最最最基础的部分,但是现在你可以说是一只脚踏入 Java 大门了。

    设计模式

    img

    设计模式放在这里不是让你马上就要学习的(当然你也可以学习,没有人能阻碍你学习),因为设计模式涉及到你工作的方方面面。有些设计模式你可能这辈子都用不到,但是你需要了解其思想,以便写出思路严谨,条理清晰的代码。

    设计模式我给你推荐几本书,你看哪个都行。

    Head First 设计模式

    img

    这本书虽然只有 14 章,但是却介绍到了所有的二十三种设计模式,每一种设计模式都有对应的应用案例,以风趣幽默的语言描述来一步一步为你揭开设计模式的面纱,告诉你设计模式的演进过程。

    读这本书不仅仅是学习知识,而是在学习一种思考的方法,学习一种认知的技巧,学习一种成长的阶梯。总之,用你闲暇的时间来读这本书,并不亚于你专注的工作或学习。

    图解设计模式

    img

    设计模式更多是一种思想,而不是一种固定的代码编写方式,千万不要局限于这些条条框框。日本人的书写的就是非常通俗易懂,适合小白。194张图表 + Java示例代码 = 轻松理解 GoF 的23种设计模式。

    本书以浅显易懂的语言逐一说明了 GoF 的 23 种设计模式。在讲解过程中,不仅搭配了丰富的图片,而且理论结合实例,用 Java 语言编写代码实现了设计模式的程序,让程序真正地运行起来,并提供了运用模式解决具体问题的练习题和答案。除此以外,本书在必要时还对 Java 语言的功能进行补充说明,以加深读者对 Java 的理解,在学习设计模式的同时也在复习 Java。

    上面这两本书非常适合初学者学习设计模式

    设计模式

    img

    这本书结合设计实作例从面向对象的设计中精选出23个设计模式,总结了面向对象设计中最有价值的经验,并且用简洁可复用的形式表达出来。书中分类描述了一组设计良好、表达清楚的软件设计模式,这些模式在实用环境下特别有用。此书适合大学计算机专业的学生、研究生及相关人员参考。

    这本书并不适合初学者,因为这本书是用C++ 写的,如果你没有对 C++ 语法有了解的话,不容易看懂。下面这段评价我觉得非常合适。

    img

    重学 Java 设计模式

    img

    给大家推荐一下我的朋友 小傅哥 写的重学 Java 设计模式,这本书是彩印的,作者写设计模式大概花了两年的时间,非常用心。书中包含大量的图示和例子。

    本书从六大设计原则入手,警示我们在日常开发过程中需要注意代码的编写原则。同时,本书列举了大量生动形象的例子,在遇到相关业务场景时可以把代码写得非常漂亮。原则既是规范,也是日常开发过程中要遵守的约定;设计模式是在业务场景下能够使用的工具。遵守原则并在合适的场景下用合适的工具,你的代码将无懈可击!

    设计模式不用看视频,就研读上面这几本就够了。

    设计模式并不适合一口气读完,因为你看完几个设计模式就会容易混,相信我,你可以一周熟悉一个设计模式,这样在工作中你也可以使用。一口气看完所有,就会记住最后一个设计模式,相信我,亲身实践。。。。。。

    Java 进阶

    Java 进阶需要学习的东西就有很多了,内容涉及许多方面,我们接下来就来和你聊聊

    注意:当你学会这些 Java 进阶的内容后,不代表你就是一个中级程序员了,恰恰相反,你需要把这些知识融会贯通并运用到项目/实践中去。掌握多少就看你自己了。

    首先是 Java 多线程,这里我先列出来多线程应该掌握知识的大纲

    img

    这里有个我小伙伴整理的一个多线程思维导图,不知道对你有没有帮助,获取地址如下

    搞懂这 10 张脑图后,我膨胀了。

    或者微信搜索「程序员cxuan」,回复「秋招」有很多更优质的思维脑图。

    img

    那么先抛开这张脑图不看,我先给你推荐几本关于 Java 并发方面的书。

    Java 并发编程实战

    不要犹豫了,这本书就是并发编程界的王者,也是你必看的一本书。

    img

    外版书籍不会和你讨论什么源码啥的,他们只看思想,思想有了,实现也就轻而易举。所以并发编程实战讨论更多的是思想,这本书同时也罗列了很多伪代码和应用场景来验证这些思想。

    这本书并不完全适合国内互联网现状,因为在八股文、背书如此盛行的今天,想要进大厂,成为"高级程序员",你还要懂一些八股文。

    Java 并发编程艺术

    所以如果你想要在国内找工作的话,那么下面这本书,更适合你。不要为我为什么,阿里人写的。

    img

    这些书罗列出来的一些知识点,其实都是大厂所经常问到的,所以这本书值得你仔细研读。

    Java 并发编程之美

    这本书比较适合初学者,我虽然没有系统看过,但是也翻了一下,这也是学习 Java 并发编程一本不错的书,可以当作查漏补缺或者巩固的一本。

    img

    图解Java多线程设计模式

    不得不说,日本人写的书就是通俗易懂,充满趣味性,这点不得不佩服,这本 Java 多线程设计模式,就是了解多线程中使用设计模式一本非常好的书籍。本书通过具体的Java 程序,以浅显易懂的语言逐一说明了多线程和并发处理中常用的12 种设计模式,帮助读者加深对多线程和并发处理的理解,并掌握其使用技巧。

    img

    书籍看这几本就差不多了,而且 Java 并发这块我不推荐你看视频,最好是亲自验证,视频这个东西毕竟也是别人吃过的剩下的,最主要的还是要穿一手鞋,亲自验证。

    说到这里,那么 Java 并发这块你应该掌握的知识点都有哪些呢?划重点划重点了!!!

    线程池这部分内容的思维导图

    img

    锁这部分内容我也汇总了一个思维导图

    img

    对了,我这里也总结了一本 《深入浅出 Java 多线程》,你可以在 太赞了!阿里几位工程师重写了 《Java 并发编程》 下载

    上面的内容如果你能理解,那么你 Java 这部分已经可以算是高级水平了,你去大厂面试问一些八股文,多线程这块问题不大了。

    JVM

    Java 虚拟机也叫做 JVM ,这部分是判断一个 Java 程序员分水岭的关键,如果你想要达到中高级 Java 程序员的层次,那么 JVM 是你必须要突破和提高的一个点。下面我就来和大家聊一下 JVM 都需要了解哪些内容。

    还是照例先给大家介绍几本了解 JVM 非常优秀的书籍

    深入理解 Java 虚拟机

    这本书是你必看的一本,而且作者是我们国内的周志明,国内作者一般讲实现比较多,专业术语比较少,这本书讲的更是通俗易懂,虽然有许多概念,不过周志明大佬都给出了示例和解释

    img

    豆瓣能给出国内作者 9.5 的评分,可知这本书写的有多好了,这本书是了解 JVM 非常经典的一本书,五星强烈推荐。

    Java 虚拟机规范

    img

    Java 虚拟机规范同样也是周志明大佬参与翻译的一本,这本书的权威性不容置疑,其实就是按照 Java 官方文档来写的,可以说看完这一本在面试的时候聊到 JVM 你都能够给出 “官方” 回答,大大增加你的面试通过几率。

    按理说学习 JVM 掌握上面两本书就 OK 了,但是这里我还是给喜欢学习的小伙伴们一些拓展书籍推荐。

    HotSpot 实战

    img

    深入浅出地讲解了 HotSpot 虚拟机的工作原理,将隐藏在它内部的本质内容逐一呈现在读者面前。本书适合于已具有一定 Java 编程基础的读者,以及在 Java 或基于 JVM 的编程语言平台下进行各类软件开发的开发人员、测试人员和运维人员。对于 JVM 和编程语言爱好者来说,《HotSpot 实战》也具有一定的学习参考价值。

    自己动手写 Java 虚拟机

    我们大家都知道,学习编程最好的方式就是动手实践,幸好 JVM 我们也能自己写了。

    img

    自己动手写 Java 虚拟机是《自己动手系列》中的一本,这个系列有很多硬核的书籍,给大家看一下。

    img

    如果大家有时间的话,我推荐大家按着书中的内容写一个虚拟机,对于掌握理解其运行原理有非常大的帮助。

    学习 JVM 我同样也不推荐大家看视频,看书就够了,学习 JVM 在于让你去想去思考,你如果非要让我推荐一个视频的话,那我也愿意双手奉上

    尚硅谷JVM全套教程,百万播放,全网巅峰(宋红康详解java虚拟机)

    JVM 所涉及到的一些内容

    img

    获取地址如下

    搞懂这 10 张脑图后,我膨胀了。

    主要涉及内容

    img

    这是一本揭示 JVM 字节码“黑科技”的著作,它从原理和应用两个维度深入剖析了 JVM 字节码。书中内容涉及 JVM 字节码的大部分应用场景,如 Java 性能优化、软件防护与破解、APM 等,通过大量实战案例讲解了它在这些场景中的实操技巧。

    这里再给大家推荐几篇不错的字节码文章

    字节码增强技术探索

    JVM基础系列第5讲:字节码文件结构 - 陈树义 - 博客园

    轻松看懂Java字节码

    到现在为止,Java 语言这条线算是走通了,虽然上面关于并发和 JVM 我列出了学习路线,但是这个学习路线并不是说只能学了并发才学 JVM,其实上这两个掺杂着一起学效果会更好,因为并发会涉及到对于 volatile synchronized 和 内存模型的关系,内存模型又是 JVM 中的内容,所以这两块其实是相辅相成的。而且没必要学并发和 JVM 的时候就要一股脑把东西全看明白,这些内容是中高级的东西,你可以一周看一篇都行。

    上面这些内容真正掌握起码要花 2 - 3 年的时间,也不是说这三年你就学上面这些东西,你可以学习其他的,我下面推荐的这些,就是在这个时间段内你应该掌握的。

    MySQL

    MySQL 其实要和 Java 基础以及 Java 并发、JVM 一起学习,甚至要比并发和 JVM 还要早,也就是说,你学完 Java 基础就可以学 MySQL 了。

    此时的 MySQL 我指的是 MySQL 基础,因为 MySQL 博大精深,想要深入理解 MySQL 不容易,而且我们一般 Java 开发把 MySQL 掌握到中级水平就可以了。

    MySQL 初级水平就是要求你会写 MySQL ,这里推荐几本书,由初级到高级,大家可以根据自己的水平和能力看对应的书籍。

    MySQL 基础教程

    img

    这本书是日本公认的 MySQL 入门首选教程,原版长销13年,好评如潮,非常详细。

    SQL 基础教程

    又是日本人写的一本高分书。

    img

    这本书介绍了关系数据库以及用来操作关系数据库的 SQL 语言的使用方法。书中通过丰富的图示、大量示例程序和详实的操作步骤说明,让读者循序渐进地掌握 SQL 的基础知识和使用技巧,切实提高编程能力。每章结尾设置有练习题,帮助读者检验对各章内容的理解程度。另外,本书还将重要知识点总结为“法则”,方便读者随时查阅。

    深入浅出 MySQL

    这本书是零基础学习 MySQL 非常好的一本书,由浅入深,文字通俗易懂。

    img

    但是这本书非常厚,涵盖的内容非常多,不容易把握重点。

    MySQL 必知必会

    相对来说,这本书就比较薄了。

    img

    同样也是入门 MySQL 非常值得看的一本。书中从介绍简单的数据检索开始,逐步深入一些复杂的内容,包括联结的使用、子查询、正则表达式和基于全文本的搜索、存储过程、游标、触发器、表约束,等等。通过重点突出的章节,条理清晰、系统而扼要地讲述了读者应该掌握的知识,使他们不经意间立刻功力大增。

    SQL 必知必会

    SQL 语法简洁,使用方式灵活,功能强大,已经成为当今程序员不可或缺的技能。

    img

    这本书是深受世界各地读者欢迎的 SQL 经典畅销书,内容丰富,文字简洁明快,针对 Oracle、SQL Server、MySQL、DB2、PostgreSQL、SQLite 等各种主流数据库提供了大量简明的实例。与其他同类图书不同,它没有过多阐述数据库基础理论,而是专门针对一线软件开发人员,直接从SQL SELECT 开始,讲述实际工作环境中最常用和最必需的 SQL 知识,实用性极强。通过本书,读者能够从没有多少SQL经验的新手,迅速编写出世界级的 SQL!

    上面推荐了一些 MySQL 的基础书籍,把上面任意 1 - 2 本啃会了之后,那么你的 CRUD 的功力就初步具备了。恭喜你离初级 Java 程序员又近了一步。

    下面我会推荐一些中高级内容,这些内容会一直伴随着你的整个开发生涯,是的你没听错,如果你做开发,那么下面这些书中的内容,真的会伴随着你整个开发生涯,不论任何语言。

    高性能 MySQL

    img

    这本书太优秀了!这本书是 MySQL 领域的经典之作,拥有广泛的影响力。我之前和出版社联系给读者送了 20 本书,超过一半的人都要的是 高性能MySQL,由此可见这个影响力!

    原文链接:cxuan 给大家送 20 本书!!!

    img

    MySQL 是怎样运行的

    img

    这本书是去年刚出的,小孩子大佬非常牛批,之前在掘金写了一篇小册,好像是购买人数最多的课程,这本书就是小册的汇总,非常硬核。

    本书采用诙谐幽默、通俗易懂的写作风格,针对上面这些问题给出了相应的解答方案。尽管本书的表达方式与司空见惯的学术派、理论派IT图书有显著区别,但本书的确是相当正经的专业技术图书,内容涵盖了使用 MySQL 的同学在求职面试和工作中常见的一些核心概念。无论是身居 MySQL专家身份的技术人员,还是技术有待进一步提升的 DBA,甚至是刚投身于数据库行业的“萌新”人员,本书都是他们彻底了解 MySQL 运行原理的优秀图书。

    数据库索引与优化

    这本书大家可能听的比较少,但这是很好的关于索引介绍的书,提供了估计查询支行时间和方法,并解释了索引对于查询效率的影响方式,对实践和指导意义。而且数据库的索引和优化是 MySQL必问的重点。

    img

    上面推荐的这些算是进阶篇,而我们下面推荐的这几本就算是 MySQL 的高级内容了。

    MySQL 技术内幕:InnoDB存储引擎

    img

    作为 MySQL 5.5 之后的首选存储引擎,InnoDB 存储引擎到底有哪些特别之处?这本书会给你详细介绍一波。这本书从源代码的角度深度解析了 InnoDB 的体系结构、实现原理、工作机制,并给出了大量最佳实践,能帮助你系统而深入地掌握 InnoDB,更重要的是,它能为你设计管理高性能、高可用的数据库系统提供绝佳的指导

    MySQL技术内幕

    img

    《MySQL技术内幕(第5版)》是MySQL方面名副其实的经典著作,全面介绍MySQL的基础知识以及MySQL有别于其他数据库系统的独特功能,书中特别关注如何高效地使用和管理MySQL。 《MySQL技术内幕(第5版)》由4个部分组成:第一部分集中介绍与数据库使用相关的一些基本概念,第二部分重点关注的是自己如何动手编写和使用 MySQL 的程序,第三部分主要是面向那些负责数据库管理的读者,第四部分提供了一些参考附录。书中包含大量示例,详尽地演示了MySQL的各项功能特性。此外,本书还为使用C语言、PHP语言和Perl语言开发数据库应用的读者提供了相关内容。 《MySQL技术内幕(第5版)》不仅适合MySQL初学者阅读,也适合想要深入了解 MySQL 的数据库管理人员和开发人员参考。

    MySQL 内核

    img

    非常优秀的一本书,这本书在 InnoDB 介绍性图书的基础之上,更深入地介绍InnoDB存储引擎的内核,例如latch、B+树索引、事务、锁等,从源代码的角度深度解析了InnoDB的体系结构、实现原理、工作机制,并给出了大量最佳实践,希望通过《MySQL内核:InnoDB存储引擎 卷1》帮助用户真正了解一个数据库存储引擎的开发。

    好了,推荐了这么多本 MySQL 的书籍,那么有没有 MySQL 的视频推荐呢?啊?MySQL 还用看视频吗?MySQL 不好讲呀,初级的直接对着命令敲就可以了,高级的内容,很多讲师也讲不清楚,更别提内核这块了,所以大家还是看书把,看书就够了!

    那么关于 MySQL ,内容其实是很多的,不过为了这个回答能作为一个标准回答来解释,我耐着性子给大家把所要学习的内容罗列一下,读者朋友们如果觉得我的付出是值得的,不妨给这篇文章点个赞哟!

    img

    那么 MySQL ,走你!

    • MySQL 基础入门

      • SQL 基础使用

      • 查询语言分类

        • DDL 语句
        • DML 语句
        • DQL 语句
        • DCL 语句
      • 如何使用 MySQL 帮助文档

        • 按层次查询
        • 快速查阅
    • MySQl 数据类型

      • 数值类型

        • 整数
        • 小数
        • 位类型
      • 日期类型

        • YEAR
        • TIME
        • DATE
        • DATETIME
        • TIMESTAMP
      • 字符串类型

        • CHAR 和 VARCHAR
        • BINARY 和 VARBINARY
        • BLOB
        • TEXT
        • ENUM
        • SET
    • MySQL 运算符

      • 算数运算符
      • 比较运算符
      • 逻辑运算符
      • 位运算符
    • MySQL 常用函数

      • 字符串函数
      • 数值函数
      • 日期和时间函数
      • 流程函数
      • 其他函数

    上面这些内容都可以在这篇文章中找到,我自己写的关于 MySQL 的实战入门总结

    138 张图带你 MySQL 入门

    MySQL 开发中应该掌握哪些知识点

    • MySQL 存储引擎

      • 存储引擎概述

      • 存储引擎特性

        • MyISAM
        • InnoDB
        • MEMORY
        • MERGE
      • 选择合适的存储引擎

    • MySQL 字符集

    • 索引的设计和使用

      • 索引概述
      • 索引设计原则
    • 视图

      • 什么是视图

      • 对视图的操作

        • 创建或者修改视图
    • 存储过程

      • 存储过程使用

        • 创建存储过程
        • 删除存储过程
        • 查看存储过程
      • 变量的使用

        • 用户变量
        • 全局变量
        • 会话变量
        • 局部变量
      • MySQL 流程介绍

    • 触发器

      • 创建触发器
      • 删除触发器
      • 查看触发器
      • 触发器的作用

    上面这些内容,可以在我自己写的 MySQL 开发中找到

    47 张图带你 MySQL 进阶!!!

    MySQL 高级内容,主要包括

    • 事务控制和锁定语句

      • 锁定语句
      • 解锁语句
    • 事务控制

      • 自动提交

      • 手动提交

        • 事务表和非事务表
    • SQL 安全问题

      • SQL Mode 解决问题
      • SQL Mode 三种作用域
    • SQL 正则表达式

    • 常见 SQL 技巧

      • RAND 函数
      • GROUD BY + WITH ROLLUP 语句
      • 数据库名、表名大小写问题
      • 外键问题
    • MySQL 常用函数

      • 字符串函数
      • 数值函数
      • 日期和时间函数
      • 流程函数
      • 其他函数

    上面这些内容,你可以在我自己写的关于 MySQL 高级部分找到

    炸裂!MySQL 82 张图带你飞!

    以上这些 MySQL 内容都是偏重日常开发和使用,没有深入到 MySQL 架构和底层,所以下面我们介绍的这些内容,会涉及到 MySQL 架构和底层的相关内容,这些内容,也是你在 CRUD 的背后,需要下的功夫。

    这些内容我也在学习,因为我是 MySQL 新手,所以这部分内容应该不是特别全,大家可以追更这个答案,我会在后面更新这个回答。

    这里再提醒大家一点,MySQL 高级内容是你在工作中慢慢掌握的,如果你想要成为初级 Java 程序员,当下不需要掌握这些内容,把我写的几篇文章看完,并且跟着敲下来,那么就可以说你的 MySQL 已经达到入门水准了,可以进行下面的学习了!!

    138 张图带你 MySQL 入门

    47 张图带你 MySQL 进阶!!!

    炸裂!MySQL 82 张图带你飞!

    Maven

    在学习框架前,我建议你先了解一下什么是 Maven,以及项目为什么要使用 Maven,狼哥的这个 Maven 系列可以了解下。

    Maven学习总结

    市面上关于 maven 的书不多,你可以看下这本

    img

    Maven 对于初学者来说,只做为了解即可,但是 Maven 这个优秀的架构是如何简化代码的,如何让我们更方便的使用,以及 Maven 中的一些不为人知的秘密,你都可以在这本书中找到。

    下面该学啥了?终于到了框架了!!! 作为一门开发,框架就是你的武器!!!就是玩儿!在抗美援朝的时候,志愿军使用轻武器加迫击炮照样干翻米国骑兵第一师和陆战第一师这种王牌军队。

    框架要学习的就是 SpringMVC 、Spring 、MyBatis,SSH 框架已经不行了,至于为什么不行,可以看一下这篇回答

    JAVA的三大框架是什么?

    框架首先要学的就是 MyBatis

    MyBatis

    MyBatis 入门,看一本书就够了。

    MyBatis 从入门到精通

    img

    这本书是我刚开始学 MyBatis 的时候看的,书中的内容我对照着都敲了一遍,可以说是非常有参考价值的一本。

    《MyBatis从入门到精通》中从一个简单的MyBatis查询入手,搭建起学习MyBatis的基础开发环境。通过全面的示例代码和测试讲解了在MyBatis XML方式和注解方式中进行增、删、改、查操作的基本用法,介绍了动态SQL在不同方面的应用以及在使用过程中的最佳实践方案。针对MyBatis高级映射、存储过程和类型处理器提供了丰富的示例,通过自下而上的方法使读者更好地理解和掌握MyBatis的高级用法,同时针对MyBatis的代码生成器提供了详细的配置介绍。

    深入理解 MyBatis ,你可以参考

    MyBatis 技术内幕

    img

    嗯,这本书其实可以说是把 MyBatis 的一些核心特性和核心组件说完了,《MyBatis 技术内幕》旨在为读者理解 MyBatis 的设计原理、阅读 MyBatis 源码、扩展 MyBatis 功能提供帮助和指导,让读者更加深入地了解 MyBatis 的运行原理、设计理念。希望《MyBatis 技术内幕》能够帮助读者全面提升自身的技术能力,让读者在设计业务系统时,可以参考 MyBatis的 优秀设计,更好地应用MyBatis。

    这本书我还是强烈推荐给大家的。

    另外,你也可以去看 MyBatis 官方文档 mybatis - MyBatis 3

    英文版的看不懂,汉化的也给你安排了。mybatis - MyBatis 3

    MyBatis 这部分内容可以去看一些视频

    【狂神说Java】Mybatis最新完整教程IDEA版通俗易懂

    2020最新MyBatis教程【IDEA版】-MyBatis从入门到精通

    那么 MyBatis 都应该掌握哪些内容呢?当然你要会用 MyBatis 了,用法直接参见官网或者 MyBatis 从入门到精通这本书就可以了。

    我上面给出的这些连接,都是让你在工作中逐步掌握的,MyBatis 要是达到能够开发的程度,你只需要看完 MyBatis 从入门到精通或者一门视频课程就可以了。

    Spring

    在学完 MyBatis ,就该学习我们的核心框架 Spring 了,Spring 能风靡到现在一定有他的道理,等你到工作中再慢慢体会它的精髓。

    学习 Spring ,我首先给你推荐的一本书就是 Spring 实战,也就是 Spring In Action,这本书我认为即使学习 Spring 最好的一本,没有之一了。

    img

    这个评价我认为是有些低了,还有评价说是什么不注重思想的,这只是一本实战书诶,又不是讲思想的,不能要求一本书能够涵盖所有的内容吧,只要这本书能够给出实战案例,代码示例,清楚的讲明白逻辑,我觉得就是好的。

    Spring 揭秘

    img

    这本书和上面的 Spring 实战一起学习,那么 Spring 你就能击败大部分选手了,这两本书是绝配。这本书更多讲解的是方案和思想。这本书没有教程似的训导,更多的是说故事般的娓娓道来,本书是作者在多年的工作中积累的第一手 Spring 框架使用经验的总结,深入剖析了 Spring 框架各个模块的功能、出现的背景、设计理念和设计原理,揭开了 Spring 框架的神秘面纱,使你“知其然,更知其所以然”。每部分的扩展篇帮助读者活学活用 Spring 框架的方方面面,同时可以触类旁通,衍生出新的思路和解决方案。

    关于 Spring 基础的视频,我推荐下面几个

    【狂神说Java】Spring5最新完整教程IDEA版通俗易懂

    尚硅谷-Spring5框架最新版教程(idea版)

    作为进阶学习,我推荐宁看看官网

    Core Technologies

    Spring 官网的权威性不用我多说了吧,但是官网有个特点,这个不只是 Spring 特有的,几乎所有的外国官网都不会带你分析源码,所以如果你想要了解设计思想和理论精髓,还是要撸源码。

    撸源码当然很费劲了,这里推荐给你两本书可以搭配着看下,网上对这两本书的褒贬不一,我不强烈推荐任何一本。。。。。。

    Spring 源码深度解析

    img

    这本书我看了一些,以我目前的能力水平可能还无法完全看懂这本书,里面的内容非常深奥,不过如果你对 Spring 源码有一些研究的话,可以看看。

    Spring 技术内幕

    img

    这本书和上面一样,代码比较多,但是解释相对较少,适合对 Spring 源码有一些了解的同学看。

    推荐给你几个 Spring 源码的视频

    这可能是B站讲的最好的SPRING源码教程(2021年最新版)

    尚硅谷Spring注解驱动教程(雷丰阳源码级讲解)

    当然,Spring 你终究还是要看源码的,所以还是硬着头皮啃源码吧,骚年们~

    关于 Spring,有哪些需要学习的东西呢?

    Spring 单独拿来使用的场景非常少,更多是作为框架的整合来用,Spring 最主要的特点就是两个:IOC 容器和 Aop,IOC 容器就是 Spring 和 各种资源整合的基础,可以说有了 IOC 的这个特点,才会有 bean 的装配,自动装配等等特性,而 Aop 就是减少业务耦合性的一种技术,让我们能够以"切面"的方式来看到业务关联性。最主要的就是这两项技术,把这两项技术弄懂了 Spring 就差不多了。

    HTTP

    再继续往下学习之前,我们先聊聊 HTTP 协议,HTTP 协议可以说是我们 Java 开发打交道最多的协议了,关于 HTTP 协议,我们这里不讲述太多,大家可以参考一下我的这篇文章,里面有详细的 HTTP 教程。

    想深入了解 HTTP 协议,有哪些值得推荐的书籍?

    Tomcat

    我刚开始接触 Tomcat 之前也有这个疑问,这个 Tomcat 是啥。。。。。。听起来很别扭,但是你可以通过这篇文章了解一下什么是 Tomcat

    Tomcat(一) Tomcat是什么:Tomcat与Java技术 Tomcat与Web应用 以及 Tomcat基本框架及相关配置

    牧酱:什么是TOMCAT

    Tomcat 我推荐你看看这几本书

    img

    这本书是一本万能工具,其主题涵盖了Apache Tomcat这一广受欢迎的开源servlet、JSP容器和高性能的web server。《Tomcat权威指南》对管理员和web站点管理员而言,具有较强的参考价值;对在开发或产品中要使用 Tomcat 作为 web 应用程序服务器的开发者而言,这是一本有用的指南书;对 Tomcat 感兴趣的人而言,这是一本优秀的介绍工具。

    但是这本书翻译好像比较糟糕,大家可以看看英文版

    http://index-of.co.uk/Misc/O’Reilly%20Tomcat%20The%20Definitive%20Guide%20(2nd%20Edition).pdf

    深入剖析 Tomcat

    另外一本就是深入剖析 Tomcat

    img

    这本书会揭示 Tomcat 的工作原理,通过学习本书,你将可以自行开发 Tomcat 组件,或者扩展已有的组件,甚至可以让你自制一个 Tomcat 服务器。

    关于 Tomcat 学习有多深,这个没有一个明确的定论,对于初级 Java 开发而言,你知道 Tomcat 是干什么的,能够起到什么作用就可以了,如果你想要达到中高级 Java 程序员的水平,那么任何深入的学习都是不为过的。

    Tomcat 架构解析

    img

    本书全面介绍了Tomcat的架构、各组件的实现方案以及使用方式。包括Tomcat的基础组件架构以及工作原理,Tomcat各组件的实现方案、使用方式以及详细配置说明,Tomcat与Web服务器集成以及性能优化,Tomcat部分扩展特性介绍等。读者可以了解应用服务器的架构以及工作原理,学习Tomcat的使用、优化以及详细配置。

    这本书和深入剖析 Tomcat 差不多,都是带你深入理解 Tomcat 的一本书,我认为你看哪本都可。

    Servlet/JSP 技术

    下面要聊的不是框架了,而是一项非常古老的技术:Servlet 和 JSP 技术,这两项技术很多人说不用在学习了,说这话的人有两点考量:1. 他认为老的技术都不用学了;2. 他自己根本就不懂。

    在没有前后端分离前,我们的项目架构都是单体,也就是各种 JSP 页面直接耦合进去,Servlet 负责前端和后端的交互,这个时候项目非常冗余,很多文件都扔在一个项目中,导致逻辑混乱,文件类型庞杂。后来随着技术的发展,出现了 SpringMVC ,封装了 Servlet,让我们不用再管理 HttpServletRequest 和 HttpServletResponse,直接让 SpringMVC 把这事干了,我们只用遵照其要求的风格 — restFul 格式,我们就能够把前后端的接口"标准化",随着 HTML5 等动态页面的发展,从而出现了后面我们说的前后端分离的项目架构,也就是前端是一个项目,后端是一个项目。

    但是他们的核心还是 Servlet 和 JSP。

    这里我又开始推荐书了

    Head First Servlet/JSP

    img

    Head First 系列的书就是幽默,通俗易懂,用轻松愉快的语言,通过做游戏的方式就把知识点给你讲明白了。讲述了关于如何编写 servlets 和 JSP 代码,如何使用 JSP 表达式语言,如何部署 Web 应用,如何开发定制标记,以及会话状态、包装器、过滤器、企业设计模式等方面的知识,以一种轻松、幽默而又形象的方式让你了解、掌握 servlets 和 JSP,并将其运用到你的项目中去。

    这本书 cxuan 强烈推荐

    这里给大家推荐一个学习 Servlet 的网站

    Servlet/JSP Gossip

    这同时也是一本书

    img

    作者是台湾人,除了语言有点没有那么痛快之外,其他技术点的讲解还不错。

    Servlet & JSP 核心编程

    img

    这也是一本基础书籍,条理清晰。对于初学者来说是一本不可多得的入门书籍。

    Servlet 和 JSP 的视频,我给你推荐

    尚硅谷最新版JavaWeb全套教程,java web零基础入门完整版

    这个其实也包括了前端 HTML CSS JavaScript Servlet JSP 部分

    JavaWeb视频教程(JSP/Servlet/上传/下载/分页/MVC/三层架构/Ajax)

    这两个视频都是 Web 整合的,单独的 Servlet 可以看看

    【千锋】Servlet教程-Servlet入门

    2020最新servlet教程-Servlet全解和案例实操_

    Spring MVC

    SpringMVC 终于来了!!!!为什么最后再说 SpringMVC,因为Spring MVC 其实就是 Servlet 的一种封装,而且 Spring MVC 打交道的对象是 HTTP 协议,所以你需要先掌握上面知识再学 Spring MVC。

    学习 SpringMVC,我推荐你看

    SpringMVC 学习指南

    img

    本书重在讲述如何通过 Spring MVC 来开发基于 Java 的 Web 应用。全书共计12章,分别从 Spring框架、模型2和 MVC模式、Spring MVC 介绍、控制器、数据绑定和表单标签库、传唤器和格式化、验证器、表达式语言、JSTL、国际化、上传文件、下载文件多个角度介绍了Spring MVC。除此之外,本书还配有丰富的示例以供读者练习和参考。

    看透 SpringMVC

    img

    全面介绍 Spring MVC 的架构、原理、核心概念和操作,通过案例完整呈现 Tomcat 的实现,系统总结 Spring MVC 九大组件的处理以及常用的技巧和实践。

    这两本书看完,SpringMVC 就差不多了,如果觉得还有遗漏的话,不妨看看官网。

    Web on Servlet Stack

    视频可以看看这个

    2020最新SpringMVC教程【IDEA版】

    那么关于 SpringMVC 都需要掌握哪些内容呢?

    Stop. Stop. Stop

    当你从 Java 基础 -> MySQL基础 -> MyBatis -> Spring -> HTML/CSS -> Servlert/JSP -> SpringMVC 学完之后,我觉得你应该需要花 1 - 2 年左右的时间,此时的你应该能够具备完成一个小型 SSM 项目的能力了,现在先不忘下面继续学习了,你应该把你的知识进行整合,你可以按照书中的内容搭建小型项目,或者完成一些 SSM 项目等,很多 Java 方向的毕业设计也就到这里就能完事儿了。

    这里给你推荐一些整合资源

    Java SSM练手小项目-手把手带你搭建一个基于SSM框架的人力资源管理后台系统

    liddhome/yosebook-ssm

    ZhongFuCheng3y/910convenienceSite

    学生管理系统(SSM简易版)总结

    https://github.com/saysky/ForestBlog

    或者看一下尚硅谷的整合教程

    尚硅谷SSM框架实战,ssm整合教程

    此时的你,可以说能够具备一个初级 Java 开发的基本素质了,但是你可能还找不到工作,为什么?因为现阶段最最最流行的框架你还没有接触,下面有请大名鼎鼎的 SpringBoot 大佬登场。

    SpringBoot

    SpringBoot 可以说是当今 Java 领域最火的框架了,那么 SpringBoot 为什么这么火呢?

    从设计理念谈起

    要说到 Spring Boot 为什么这么火,就必须得聊聊 Spring Boot 的设计理念,正是此设计理念奠基了Spring Boot 开发设计的基准,让 Spring Boot 走到了今天。

    那 Spring Boot 的设计理念是什么呢?它就是约定优于配置(convention over configuration)。

    约定优于配置并不是一个新概念,它是一种软件设计范式,很早就应用在软件架构设计中,它的作用是减少软件开发人员需做决定的数量,获得简单的好处,而又不失灵活性。

    只是 Spring Boot 让这个设计理念上升了一个层次,Spring Boot 不止在某个功能上实现此设计理念,而是整个软件体系都在践行约定优于配置。

    Spring Boot 体系将约定优于配置的思想展现得淋淋尽致,小到配置文件,中间件的默认配置,大到内置容器、生态中的各种 Starters 无不遵循此设计规则。

    Spring Boot Jpa 80% 大部分查询功能都以约定的方式给与提供,另外 20% 复杂的场景,提供另外的技术手段来解决,典型的约定优于配置的实现。

    Spring Boot Starter ,在项目启动的时候,根据约定信息对组件进行加载、初始化。因此项目中引入了对于的 Starter 之后,就可以到达开箱即用的效果。

    甚至 Spring Cloud 的设计,也借鉴了约定优于配置的思想,很多组件都是在启动时,默认提供了其相关的功能,可以让我们的使用到达很少配置或者零配置。

    Spring Boot 的 Starter 机制

    Spring Boot Starter 是 Spring Boot 的 星辰大海。

    正是因为丰富的 Spring Boot Starter ,让 Spring Boot 征服了使用各个开源软件的开发者,只要 Spring Boot Starter 指向哪个开源软件,就会让某个开源软件变得异常好用。

    这真的是这样,有一种神笔马良的感觉(夸张了一点)。

    那什么是 Spring Boot Starter 呢?

    在 Spring Boot 中,Starter 是为快速应用开发提供“一站式服务”的依赖(Dependency)。Starter 使得开发人员在开始编写新的模块时不需要拷贝样板式的配置文件、编写样板式的代码,只需要提供最简单的配置即可开始编程。

    Spring Boot Starter 有两个核心组件:自动配置代码和提供自动配置模块及其它有用的依赖。也就意味着当我们项目中引入某个 Starter ,即拥有了此软件的默认使用能力,除非我们需要特定的配置,一般情况下我仅需要少量的配置或者不配置即可使用组件对应的功能。

    Spring Boot 由众多 Starter 组成,随着版本的推移 Starter 家族成员也与日俱增。在传统 Maven 项目中通常将一些层、组件拆分为模块来管理,以便相互依赖复用,在 Spring Boot 项目中我们则可以创建自定义 Spring Boot Starter 来达成该目的。

    Spring Boot Starter 统一了使用不同软件的编程体验。

    在没有使用 Spring Boot Starter 之前,我们需要按照每个开源软件的特性,将对应的组件包集成到我们的开发项目中,因为每个组件的设计理念和开发团队都不一致,因此会有很多不同的调用风格在我们的项目中。

    Spring Boot 强大到很多技术社区都主动提供了对应的 Starter 组件,比如 MyBatis 、Apache Camel、Apache CXF 等等。随着 Spring Boot 的发展 Starter 组件会越来越多。

    Spring Boot 非常强大的原因之一就是提供了大量的 Spring Boot Starter ,如此多的“开箱即用” 的依赖模块,让我们在日常开发中“拿来即用”,以便更加快速和高效专注于业务开发。

    Spring Boot 的豪华开发团队

    我们经常会看到在介绍 Spring Boot 的时候有这么一句:Spring Boot 是由 Pivotal 团队提供的全新框架。由此我们得知 Spring Boot 是由 Pivotal 团队所研发,那么 Pivotal 团队到底是一个什么样的团队呢?其实这里的 Pivotal 团队是指 Pivotal 公司。

    Pivotal 公司介绍:致力于“改变世界构造软件的方式(We are transforming how the world builds software)”,提供云原生应用开发 PaaS 平台及服务,帮助企业客户采用敏捷软件开发方法论,从而提高软件开发人员工作效率、减少运维成本,实现数字化转型、IT 创新,并最终实现业务创新。

    Pivotal 公司可谓是大牛云集,公司研发的产品有: Spring 以及衍生框架、缓存中间件 Redis、消息队列框架 RabbitMQ、数据引擎产品 Greenplum,还有 Tomcat、Groovy 里的一些顶级开发者,DevOps 理论的提出者都在这个公司。

    2016 年风靡全球的云原生理念亦是 Pivotal 公司提出,美国硅谷著名的精益化创业书籍的作者 Eric Ries 也加入了 Pivotal公司。Spring Boot 为什么如此的优秀,正是因为背后有这些全球的顶级开发者。

    Pivotal 公司的背后其实是一场商业并购大片,有很多著名的公司在其身后,戴尔、Spring、EMC、VMware 等等,详情大家开源看这篇文章:《是时候给大家介绍 Spring Boot/Cloud 背后豪华的研发团队了》

    有个好干爹

    Spring Boot 的干爹是谁呢?毫无疑问就是 Spring 了。有图为证,看下面:

    img

    Spring Boot 完全依赖 Spring 来开发,发明 Spring Boot 也是为了让大家更好的使用 Spring,而不是消灭 Spring ,所以说没有 Spring 这个干爹,就没有 Spring Boot 。

    当然 Spring Boot 不仅是基于 Spring 开发这么简单,Spring Boot 完全继承了 Spring 干爹的声誉,说实话如果没有 Spring 这个老干爹十多年来打拼下来的天气,哪有 Spring Boot 今天来的风光。

    2002 年的时候, Rod Johnson 可能也没有想到自己开创的一个小开源软件,可以发展到今天这么辉煌的一刻。到了今天,如果一个 Java 程序员说自己不知道 Spring ,那估计会把他当作外星人吧。

    Spirng 当时以 IoC 和 Aop 开始发家,一开始的目标只是想干掉 EJB 这个庞然大物,但是随着时间的发展,Spring 开始了一路的逆袭之路,在2010年的时候 Spring 还是 SSH 三大框架之一,到了今天 Spring 要说自己是老二,还这没有人敢说自己是第一。

    正是因为 Spring 在 Java 社区中有如此强大的影响力,所以在 Spring Boot 一出生的时候,就受到了广大社区爱好者的关注、使用、写教程、贡献代码、提 Bug。正是因为庞大的开源爱好者,才一起反铺 Spring Boot ,让 Spring Boot 发展这么快,这么好。

    上面这段内容转载自 Spring Boot 为什么这么火?

    所以你只需要再学习完 SpringBoot ,就能够完成一个初级 Java 开发的用人需求了。所以你必须要学好 SpringBoot,之前看很多大咖推荐 SpringBoot 实战这本书,我觉得这本书并不好,反正我看这本书的时候找不到头绪和思路

    img

    很多人认为是基础入门书籍,但是我觉得学习 SpringBoot ,看这几个 github 就行了

    Github点赞接近 100k 的Spring Boot学习教程+实战项目推荐!

    推荐以 Spring Boot 教程与 Spring Cloud 教程的详细开源项目 SpringBoot-Learning 此项目内容为 Spring Boot 教程程序样例,对于 Spring Boot 的初学者来说非常有用,文末也列出了Spring 相关开源项目,供大家交流学习。

    1. SpringBoot-Learning 部分样例:
    快速入门

    工程配置

    Web开发

    数据访问、日志管理等等,项目地址:程序猿DD/SpringBoot-Learning - 码云 Gitee.com

    1. 项目名称:spring boot 实践学习案例 springboot-learning-example
      项目结构:
      a. 『 基础 - 入门篇 』

    b. 『 基础 - Web 业务开发篇 』

    c. 『 基础 – 数据存储篇 』

    d. 『 基础 – 数据缓存篇 』

    e. 『 其他篇 』

    Spring Data ES 篇

    项目地址:泥沙砖瓦浆木匠/springboot-learning-example - 码云 Gitee.com

    Spring 相关项目推荐:

    1. 项目名称:基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构

    img

    项目内容:基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构,提供整套公共微服务服务模块:集中权限管理(单点登录)、内容管理、支付中心、用户管理(支持第三方登录)、微信平台、存储系统、配置中心、日志分析、任务和通知等,支持服务治理、监控和追踪,努力为中小型企业打造全方位J2EE企业级开发解决方案。
    项目地址:shuzheng/zheng - 码云 Gitee.com

    1. 项目名称:模块化开发系统 ybg-spring-fast
      项目简介:以SpringBoot 为中心,模块化开发系统,用户可以随意删减除权限框架外 任意的系统模块。复用,组装性强主要应用技术:spring Security+Ehcache+quartz+swagger2+Mysql5.6+springjdbc+druid+spring social+spring session + layerui+vue.js等。

    img

    项目地址:YYDeament/ybg-spring-fast - 码云 Gitee.com

    1. 项目名称:JAVA分布式快速开发平台 iBase4J

    img

    **项目内容:**JAVA分布式快速开发平台:SpringBoot,SpringMVC,Mybatis,mybatis-plus,motan/dubbo分布式,Redis缓存,Shiro权限管理,Spring-Session单点登录,Quartz分布式集群调度,Restful服务,QQ/微信登录,App token登录,微信/支付宝支付;日期转换、数据类型转换、序列化、汉字转拼音、身份证号码验证、数字转人民币、发送短信、发送邮件、加密解密、图片处理、excel导入导出、FTP/SFTP/fastDFS上传下载、二维码、XML读写、高精度计算、系统配置工具类等等。
    项目地址:iBase4J/iBase4J - 码云 Gitee.com

    **4. 项目名称:**Java EE(J2EE)快速开发框架 ThinkGem
    **项目内容:**Java EE(J2EE)快速开发框架,基于经典技术组合(Spring MVC、Apache Shiro、MyBatis、Bootstrap UI),包括核心模块如:组织机构、角色用户、权限授权、数据权限、内容管理、工作流等。虽说很长时间没有大的更新了,但它的架构精良易于扩展深受大家喜爱,依然是中小企业的首选,它的功能设计、底层架构也非常具有参考意义、是学习入门的首选。关注我ThinkGem开源中国博客了解4.0最新动态。
    项目地址:ThinkGem/JeeSite - 码云 Gitee.com

    **5. 项目名称:**Java快速开发平台 MCMS

    img

    项目内容:完整开源,Java快速开发平台。基于Spring、SpringMVC、Mybatis架构,MStore提供更多好用的插件与模板(文章、商城、微信、论坛、会员、评论、支付、积分、工作流、任务调度等,同时提供上百套免费模板任意选择),价值源自分享!铭飞系统不仅一套简单好用的开源系统、更是一整套优质的开源生态内容体系。
    项目地址:铭飞/MCMS - Gitee

    1. 项目名称:基于Spring Cloud微服务化开发平台 AG-Admin

    img

    项目内容:AG-Admin是国内首个基于Spring Cloud微服务化开发平台,具有统一授权、认证后台管理系统,其中包含具备用户管理、资源权限管理、网关API管理等多个模块,支持多业务系统并行开发,可以作为后端服务的开发脚手架。代码简洁,架构清晰,适合学习和直接项目中使用。核心技术采用Eureka、Fegin、Ribbon、Zuul、Hystrix、JWT Token、Mybatis等主要框架和中间件,前端采用vue-element-admin组件。
    项目地址:老A/AG-Admin - 码云 Gitee.com

    1. 项目名称:轻量级的Spring Boot快速开发平台 renren-fast
      项目简介:renren-fast是一个轻量级的Spring Boot快速开发平台,其设计目标是开发迅速、学习简单、轻量级、易扩展;使用Spring Boot、Shiro、MyBatis、Redis、Bootstrap、Vue2.x等框架,包含:管理员列表、角色管理、菜单管理、定时任务、参数管理、代码生成器、日志管理、云存储、API模块(APP接口开发利器)、前后端分离等。
      项目地址:人人开源/renren-fast - 码云 Gitee.com

    作者:Gitee 链接:https://www.zhihu.com/question/53729800/answer/255785661

    其实你学了一段时间就会发现,SpringBoot 就完全是个脚手架,方便我们快速搭建一个项目,简化了配置,不用再让你写繁杂的 XML 表达式,相反的而是用 注解 来实现,他们的原理类似,只不过使用注解能让你的项目更加简洁。

    最后再推荐一下 SpringBoot 的官网

    https://docs.spring.io/spring-boot/docs/2.3.10.RELEASE/reference/htmlsingle/

    Spring Cloud

    Spring Cloud 是以 SpringBoot 为基础的微服务项目架构,现在大多数互联网公司甚至一些传统行业都开始用 Spring Cloud 为基础架构,有些是因为业务需求,有些是为了装 B,反正不管怎样,面试官问起你会不会 Spring Cloud,你说不会的话,那么你的印象分估计会降低,所以初级程序员,或多或少要了解一下 Spring Cloud ,所以我给你推荐几本书和 Github 作为基础和练习。

    我刚开始学 Spring Cloud 是看的这本书,当然现在这个书中的版本有些好了,不过作为了解,你也应该看一下这本书

    img

    《Spring Cloud 微服务实战》从时下流行的微服务架构概念出发,详细介绍了 Spring Cloud 针对微服务架构中几大核心要素的解决方案和基础组件。对于各个组件的介绍,《Spring Cloud 微服务实战》主要以示例与源码结合的方式来帮助读者更好地理解这些组件的使用方法以及运行原理。同时,在介绍的过程中,还包含了作者在实践中所遇到的一些问题和解决思路,可供读者在实践中作为参考。

    这本书的作者翟永超(DD)也建了一个网站

    https://blog.didispace.com/spring-cloud-learning/

    反正学习 Spring Cloud 跟着 D 总没错的。

    可以看下 Spring Cloud 大致都要学习哪些东西

    Brixton 版本

    img

    Dalston 版本

    img

    Edgware 版本

    img

    Finchley 版本

    img

    还有各种套件的选择

    img

    img

    顺便把阿里巴巴开源框架 Spring Cloud Alibaba 学了

    img

    除了上述内容之外,还可以看看到底什么是微服务

    img

    本书全面介绍了微服务的建模、集成、测试、部署和监控,通过一个虚构的公司讲解了如何建立微服务架构。主要内容包括认识微服务在保证系统设计与组织目标统一上的重要性,学会把服务集成到已有系统中,采用递增手段拆分单块大型应用,通过持续集成部署微服务,等等。

    什么是微服务设计模式,微服务设计模式都有哪些,以及微服务的拆分策略等。

    img

    估计很多人可能会把集群、微服务和分布式搞混了,下面来解惑下

    集群是个物理形态,分布式是个工作方式。
    1.分布式:一个业务分拆多个子业务,部署在不同的服务器上
    2.集群:同一个业务,部署在多个服务器上
    分布式是指将不同的业务分布在不同的地方。而集群指的是将几台服务器集中在一起,实现同一业务。

    分布式中的每一个节点,都可以做集群。而集群并不一定就是分布式的。
    举例:就比如新浪网,访问的人多了,他可以做一个集群,前面放一个响应服务器,后面几台服务器完成同一业务,如果有业务访问的时候,响应服务器看哪台服务器的负载不是很重,就将给哪一台去完成。
    而分布式,从窄意上理解,也跟集群差不多,但是它的组织比较松散,不像集群,有一个组织性,一台服务器垮了,其它的服务器可以顶上来。
    分布式的每一个节点,都完成不同的业务,一个节点垮了,那这个业务就不可访问了。
    简单说,分布式是以缩短单个任务的执行时间来提升效率的,而集群则是通过提高单位时间内执行的任务数来提升效率。
    例如:如果一个任务由 10 个子任务组成,每个子任务单独执行需 1 小时,则在一台服务器上执行该任务需 10 小时。
    采用分布式方案,提供 10 台服务器,每台服务器只负责处理一个子任务,不考虑子任务间的依赖关系,执行完这个任务只需一个小时。(这种工作模式的一个典型代表就是 Hadoop 的 Map/Reduce 分布式计算模型)
    而采用集群方案,同样提供 10 台服务器,每台服务器都能独立处理这个任务。假设有 10 个任务同时到达,10 个服务器将同时工作,1 小时后,10 个任务同时完成,这样,整体来看,还是 1 小时内完成一个任务!
    好的设计应该是分布式和集群的结合,先分布式再集群,具体实现就是业务拆分成很多子业务,然后针对每个子业务进行集群部署,这样每个子业务如果出了问题,整个系统完全不会受影响。
    另外,还有一个概念和分布式比较相似,那就是微服务。
    **微服务是一种架构风格,一个大型复杂软件应用由一个或多个微服务组成。**系统中的各个微服务可被独立部署,各个微服务之间是松耦合的。每个微服务仅关注于完成一件任务并很好地完成该任务。在所有情况下,每个任务代表着一个小的业务能力。

    区别:
    1.分布式

    img

    将一个大的系统划分为多个业务模块,业务模块分别部署到不同的机器上,各个业务模块之间通过接口进行数据交互。区别分布式的方式是根据不同机器不同业务。
    上面:service A、B、C、D 分别是业务组件,通过API Geteway进行业务访问。
    注:分布式需要做好事务管理。
    分布式事务可参考:微服务架构的分布式事务解决方案

    2.集群模式

    img

    集群模式是不同服务器部署同一套服务对外访问,实现服务的负载均衡。区别集群的方式是根据部署多台服务器业务是否相同。
    注:集群模式需要做好session共享,确保在不同服务器切换的过程中不会因为没有获取到session而中止退出服务。
    一般配置Nginx的负载容器实现:静态资源缓存、Session共享可以附带实现,Nginx支持5000个并发量。

    分布式是否属于微服务?
    答案是肯定的。微服务的意思也就是将模块拆分成一个独立的服务单元通过接口来实现数据的交互。

    微服务架构
    微服务的设计是为了不因为某个模块的升级和BUG影响现有的系统业务。微服务与分布式的细微差别是,微服务的应用不一定是分散在多个服务器上,他也可以是同一个服务器。

    img

    分布式和微服的架构很相似,只是部署的方式不一样而已。

    链接:https://www.jianshu.com/p/1f9455139a31
    作者:mayiwoaini

    然后我就要推荐给你一本分布式方向的神书了

    img

    有些人认为这是数据处理方向的人看的书,但是里面涉及 NoSQL, 大数据,最终一致性,CAP,MapReduce,流处理确实 Java 程序员也需要知道和了解的,这本书讲的比较高深,适合在工作中慢慢研究,不太适合 Java 方向的初学者。

    img

    综上所述,我上面推荐的三本书都适合中高级 Java 程序员来看的,初学者把 D 总的文章搞懂了就行,或者可以做做下面的 github

    macrozheng/springcloud-learning

    Dubbo

    说完了 Spring Cloud,怎能少的了 Dubbo?

    先来了解一下 Spring Cloud 和 Dubbo 的区别是什么,如何做技术选型?

    Java 微服务框架选型(Dubbo 和 Spring Cloud?)

    Dubbo 的书籍感觉一般,我没有看过,不过大家感兴趣可以了解一下

    img

    《深入理解Apache Dubbo与实战》首先介绍Dubbo的简史、后续的规划和整体架构大图;接着介绍Dubbo环境配置,并基于Dubbo开发第一款应用程序;然后介绍Dubbo内置的常用注册中心的实现原理,Dubbo扩展点加载的原理和实现,Dubbo的启动、服务暴露、服务消费和优雅停机的机制,Dubbo中RPC协议细节、编解码和服务调用实现原理,Dubbo集群容错、路由和负载均衡机制,Dubbo的扩展点相关知识,Dubbo高级特性的实现和原理,Dubbo常用的Filter的实现原理,Dubbo中新增etcd3注册中心的实战内容和Dubbo服务治理平台的相关知识;最后介绍Dubbo未来生态和Dubbo Mesh的相关知识。

    官网文档走起! Apache Dubbo

    Dubbo 的 Github apache/dubbo

    Redis

    Redis 可以说是最流行的 NoSQL 数据库了,你可能不知道 Redis 是干什么用的,我先给你普及一下。

    缓存数据库目前最常用的两种就是 Redis 和 Memcached,与 Memcached 相比 Redis 其一大特点是支持丰富的数据类型(Memcached 只能用 string 类型)。Redis 因为其丰富的数据结构因此应用范围不局限于缓存,有很多场景用 Redis 来实现可以大大减少工作量。

    关于 Redis 的使用场景,可以看一下

    Redis能用来做什么

    深入分析Redis特点及应用场景

    这里给大家推荐两本 Redis 入门的经典书籍

    Redis 实战

    img

    这本书一共由三个部分组成。第一部分对Redis进行了介 绍,说明了Redis的基本使用方法、它拥有的5种数据结构以及操作这5种数据结构的命令,并讲解了如何使用Redis去构建文章展示网站、cookie、购物车、网页缓存、数据库行缓存等一系列程序。第二部分对Redis命令进行了更详细的介绍,并展示了如何使用Redis去构建更为复杂的辅助工具和应用程序,并在最后展示了如何使用Redis去构建一个简单的社交网站。第三部分对Redis用户经常会遇到的一些问题进行了介绍,讲解了降低Redis内存占用的方法、扩展Redis性能的方法以及使用Lua语言进行脚本编程的方法。这

    Redis 设计与实现

    img

    这本书强烈推荐,系统而全面地描述了 Redis 内部运行机制,图示丰富,描述清晰,并给出大量参考信息,是 NoSQL 数据库开发人员的案头必备。

    这本书和上面的 Redis 实战,一个讲实现,一个讲思想,正所谓理论和实践相结合。

    Redis 开发与运维

    img

    这本书也是学习 Redis 很好的一本,也针对于初学者,适合零基础的童鞋。这本书全面讲解 Redis 基本功能及其应用,并结合线上开发与运维监控中的实际使用案例,深入分析并总结了实际开发运维中遇到的“陷阱”,以及背后的原因, 包含大规模集群开发与管理的场景、应用案例与开发技巧,为高效开发运维提供了大量实际经验和建议。

    Redis 深度历险:核心原理与应用实践

    img

    Redis 深度历险是老钱写的,老钱最开始在掘金开了一门掘金小册,受到广泛好评,所以这本书也是如此。Redis 深度历险适合对于 Redis 有一定基础了解的程序员阅读,渴望深度掌握 Redis 技术原理的中高级后端开发者;渴望成功进入大型互联网企业研发部的中高级后端开发者;需要支撑公司 Redis 中间件运维工作的初中级运维工程师;对 Redis 中间件技术好奇的中高级前端技术研究者。

    学习 Redis 基本上上面几本书看完就差不多了,当然官网是必不可少的

    Redis

    关于 Redis 相关知识,你需要了解

    Kafka

    我刚开始听到 Kafka 的时候,还以为是写《变形记》的那位呢 哈哈哈,其实不是,Kafka 是一个优秀的消息流平台。

    img

    Kafka学习之路 (一)Kafka的简介

    就介绍一些 kafka 的基本内容显然不够,更多内容你可以参考

    Kafka 权威指南

    img

    我当时入门看的是这本书,所以强烈推荐一下。这本书是 O’ RELLY 出版的,作者为 LinkedIn 的 Kafka 核心作者和一线技术人员共同执笔写成的,可以说是非常权威。

    这本书详细介绍了如何部署Kafka集群、开发可靠的基于事件驱动的微服务,以及基于 Kafka 平台构建可伸缩的流式应用程序。通过详尽示例,你将会了解到 Kafka 的设计原则、可靠性保证、关键API,以及复制协议、控制器和存储层等架构细节。

    Apache Kafka实战

    img

    这本书的作者是胡夕老师,胡夕老师对 Kafka 有非常深入的理解,他也在极客时间开了一门 Kafka 的课程,我是通过课程认识他的,胡夕老师对 Kafka 源码有很深的研究,所以这本 Apache Kafka 实战,是一本涵盖 Apache Kafka 各方面的具有实践指导意义的工具书和参考书。作者结合典型的使用场景,对 Kafka 整个技术体系进行了较为全面的讲解,以便读者能够举一反三,直接应用于实践。同时,本书还对 Kafka 的设计原理及其流式处理组件进行了较深入的探讨,并给出了翔实的案例。

    深入理解Kafka:核心设计与实践原理

    img

    这本书适合对 Kafka 有一定程度了解的童鞋,这本书从基础概念入手,循序渐进地转入对其内部原理的剖析。

    最后,官网压轴

    Apache Kafka

    kafka 的学习视频,大家看看尚硅谷的就可以了。

    尚硅谷Kafka教程(kafka框架快速入门)

    Kafka 一般会涉及如下内容

    ZooKeeper

    Kafka 的底层是使用 ZooKeeper 来保证可靠性的,那么 ZooKeeper 是什么呢?

    ZooKeeper 介绍

    ZooKeeper 一个中心化的服务, 用于维护配置信息, 命名服务(naming), 提供分布式同步和集群服务(group services)。

    它是一个开源的分布式应用程序协调服务, 作为 Google Chubby 的一个开源实现, 是 Hadoop 和 Hbase 的重要组件。 ZooKeeper 的目标是封装好复杂易出错的关键服务, 暴露简单易用、高效、稳定的接口给用户, 提供 java 和 C 接口。

    设计目标

    简单
    ZooKeeper 允许分布式的进程之间通过一个共享的层级命名空间(hierarchinal namespace, 和文件系统类似)进行协调。
    ZK 实现了高性能、高可用和严格顺序访问, 是的它可以用于大规模分布式系统, 无单点故障问题, 和复杂的同步原语。
    复制的(replicated)
    ZooKeeper 和其它的分布式进程一样, 也是一个集群的主机作为一个整体。结构如下图

    img

    组成 ZooKeeper 服务的所有服务器必须指向相互之间的存在, 并在内存中维护一张状态图和事务日志, 以及永久储存的快照。 只要服务器中的一个多数(majority)保持可用, ZooKeeper 就可以继续提供服务。
    客户端连接到一个单一的(single) ZooKeeper 服务器, 通过 TCP 连接来发送请求、获取响应、观察的事件和发送心跳。 如果 TCP 连接断开了, 客户端则连接到其它服务器。

    有序(ordered)
    ZooKeeper 用一个数字表示每一次的更新, 以反映所有 ZooKeeper 事务的顺序。后续可以利用这个顺序来实现诸如同步原语之类的高级抽象。

    快速(fast)
    ZK 在读多写少的负载中性能尤其高, 读写比例大概处于 10:1 时表现最好。

    数据模型和层级命名空间(hierarchinal namespace)
    命名空间

    img

    名字是一个用斜杆(/)分隔的路径元素序列, ZK 中每一个节点(znode)都用路径标识。

    节点和临时节点(ephemeral nodes)
    和文件系统不同, ZK 中的节点可以拥有数据和子节点。ZK 被设计来存储协调数据: 状态信息、配置、位置信息等, 所以数据通常很小(byte 到 kilobyte 之间)。
    znode 维护了一个状态结构体(stat structure), 结构体包含数据修改的版本, ACL(Access Control List) 变化, 时间戳。 每次数据修改, 版本号加一。
    znode 中的数据读取都是原子的, 读写都是整个节点所有数据进行读写, 并且通过 ACL 进行访问控制。
    临时节点表示只在 session 存续的期间存在的节点, 在实现[tbd]时很有用。

    条件更新和观察(watches)
    当一个 znode 改变时会触发一个观察, 且删除 watch。客户端可以通过 watch 来接收到通知, 如果客户端和 ZK 的连接断开了会受到一个本地通知。

    保证(Guarantees)

    1. 顺序一致性(Sequential Consistency) - 从一个客户端来的更新会按照发送的顺序应用
    2. 原子性(atomicity) -
    3. 单系统镜像(Signle System Image) - 不管客户端连到的是哪一个 ZK 服务器, 看到的都是同样一个 view
    4. 可靠性(Reliability) -
    5. 及时性(Timeliness) - 在一定的时间范围内(within a certain time bound), 客户端看到服务器 view 保证是最新的

    简单 API
    简单的编程接口

    • create
    • delete
    • exists
    • get data
    • set data
    • get children
    • sync

    实现

    img

    除了 Reqeust Processor 以外, 组成 ZK 服务的每一台服务器拥有所有组件的一份本地拷贝。Replicated Database 是一个内存数据库, 而每一个更新操作都会先序列化到磁盘, 然后才会应用到内存数据库。

    • 读请求 - ZK 服务器根据的本地 Replicated Database 响应
    • 写请求 - ZK 服务器会将来自客户端的所有写请求转发到角色为 leader 的 ZK 服务器(leader 只有一个, 其它称为 follower) 来写, 然后同步给 follower

    ZK 使用一个自定义的原子消息协议。

    性能

    img

    测试环境

    • ZooKeeper release 3.2
    • 服务器 双核 2GHz Xeon, 两块 15K RPM 的 SATA, 一块作为 ZK 的日志, 快照写到系统盘
    • 读写请求都是 1K
    • “Servers” 表示提供服务的 ZK 服务器数量
    • 接近 30 台其它服务器用来模拟客户端
    • leader 配置成不接受客户端连接

    可靠性

    img

    图中 1-5 表示如下五个事件:

    1. 一个 follower 失效和恢复
    2. 另外一个 follower 失效和恢复
    3. leader 失效
    4. 两个 follower 失效和恢复
    5. 另外一个 leader 失效

    ZK 服务器组由 7 台服务器组成, 写请求的比例保持在 30%。
    几个观察到的现象

    • follower 失效和恢复足够快的话, ZK 能够保持高吞吐
    • leader 失效性能影响较大
    • 花了不到 200ms 来选举一个新的 leader
    • follower 恢复后, 吞吐能够提升回来

    更多关于 ZooKeeper 的内容,可以参考下

    从 Paxos 到 Zookeeper

    img

    这本书从分布式一致性的理论出发,向读者简要介绍几种典型的分布式一致性协议,以及解决分布式一致性问题的思路,其中重点讲解了 Paxos 和 ZAB 协议。同时,本书深入介绍了分布式一致性问题的工业解决方案——ZooKeeper,并着重向读者展示这一分布式协调框架的使用方法、内部实现及运维技巧,旨在帮助读者全面了解 ZooKeeper,并更好地使用和运维 ZooKeeper。

    ZooKeeper : 分布式过程协同技术详解

    img

    这本书内容非常好,但是翻译属实有些不忍直视了。

    一般市面上关于 ZooKeeper 的书非常少,只找到了这两本,推荐读者读一下 《从 Paxos 到 ZooKeeper》 这本书,我看过一遍,内容还是写的非常容易理解。

    关于 ZooKeeper 的视频,我还是推荐你尚硅谷的

    尚硅谷Zookeeper教程(zookeeper框架精讲)

    关于 ZooKeeper ,你需要掌握的有

    Nginx

    Nginx 基础知识

    Nginx 是什么?

    Nginx 是一个 web 服务器,主要处理客户端和服务器的请求分发。

    特点和优势

    1. 高并发
    2. 热部署
    3. 低功耗
    4. 热部署

    使用和扩展

    开源免费的Nginx与商业版Nginx Plus,与之对应的是免费OpenResty与商业版OpenResty

    Nginx 正向代理与反向代理

    为了便于理解,首先先来了解一下一些基础知识,nginx是一个高性能的反向代理服务器那么什么是反向代理呢?

    代理是在服务器和客户端之间假设的一层服务器,代理将接收客户端的请求并将它转发给服务器,然后将服务端的响应转发给客户端。

    不管是正向代理还是反向代理,实现的都是上面的功能。

    如果你对OSI 七层模型与 TCP/IP 四层模型不是很熟悉可以再回顾下

    img

    正向代理

    正向代理(forward)意思是一个位于客户端和原始服务器 (origin server) 之间的服务器,为了从原始服务器取得内容,客户端向代理发送一个请求并指定目标 (原始服务器),然后代理向原始服务器转交请求并将获得的内容返回给客户端。

    正向代理是为我们服务的,即为客户端服务的,客户端可以根据正向代理访问到它本身无法访问到的服务器资源。

    正向代理对我们是透明的,对服务端是非透明的,即服务端并不知道自己收到的是来自代理的访问还是来自真实客户端的访问。

    反向代理

    反向代理(Reverse Proxy)方式是指以代理服务器来接受 internet 上的连接请求,然后将请求转发给内部网络上的服务器,并将从服务器上得到的结果返回给 internet 上请求连接的客户端,此时代理服务器对外就表现为一个反向代理服务器。

    反向代理是为服务端服务的,反向代理可以帮助服务器接收来自客户端的请求,帮助服务器做请求转发,负载均衡等。

    反向代理对服务端是透明的,对我们是非透明的,即我们并不知道自己访问的是代理服务器,而服务器知道反向代理在为他服务。

    Nginx 基本配置

    安装nginx时通常需要编译自己需要的模块,可以使用 rpmbuild 制作 Nginx 的 RPM 包

    main                                # 全局配置
    
    events {                            # nginx工作模式配置
    }
    
    http {                                # http设置
        ....
    
        server {                        # 服务器主机配置
            ....
            location {                    # 路由配置
                ....
            }
    
            location path {
                ....
            }
    
            location otherpath {
                ....
            }
        }
    
        server {
            ....
    
            location {
                ....
            }
        }
    
        upstream name {                    # 负载均衡配置
            ....
        }
    }
    

    如果想要生成nginx规范配置,可以参考nginxconfig.io

    下面是 nginx 一些配置中常用的内置全局变量,你可以在配置的任何位置使用它们。

    | 变量名 | 功能 | | — | — | | $host | 请求信息中的 Host,如果请求中没有 Host 行,则等于设置的服务器名 | | $request_method | 客户端请求类型,如 GETPOST | | $remote_addr | 客户端的 IP 地址 | | $args | 请求中的参数 | | $content_length | 请求头中的 Content-length 字段 | | $http_user_agent | 客户端 agent 信息 | | $http_cookie | 客户端 cookie 信息 | | $remote_addr | 客户端的 IP 地址 | | $remote_port | 客户端的端口 | | $server_protocol | 请求使用的协议,如 HTTP/1.0HTTP/1.1\ | | $server_addr | 服务器地址 | | $server_name | 服务器名称 | | $server_port | 服务器的端口号 |

    img

    Nginx 负载均衡

    Upstream 指定后端服务器地址列表,在 server 中拦截响应请求,并将请求转发到 Upstream 中配置的服务器列表。

    upstream balanceServer {
        server 10.1.22.33:12345;
        server 10.1.22.34:12345;
        server 10.1.22.35:12345;
    }
    
    server {
        server_name  fe.server.com;
        listen 80;
        location /api {
            proxy_pass http://balanceServer;
        }
    }
    

    上面的配置只是指定了 nginx 需要转发的服务端列表,并没有指定分配策略。

    默认情况下采用的是轮询策略,将所有客户端请求轮询分配给服务端。这种策略是可以正常工作的,但是如果其中某一台服务器压力太大,出现延迟,会影响所有分配在这台服务器下的用户。

    Nginx常用命令

    # 快速关闭Nginx,可能不保存相关信息,并迅速终止web服务
    nginx -s stop
    # 平稳关闭Nginx,保存相关信息,有安排的结束web服务
    nginx -s quit
    # 因改变了Nginx相关配置,需要重新加载配置而重载
    nginx -s reload
    # 重新打开日志文件
    nginx -s reopen
    # 为 Nginx 指定一个配置文件,来代替缺省的
    nginx -c filename
    # 不运行,而仅仅测试配置文件。nginx 将检查配置文件的语法的正确性,并尝试打开配置文件中所引用到的文件
    nginx -t
    #  显示 nginx 的版本
    nginx -v
    # 显示 nginx 的版本,编译器版本和配置参数
    nginx -V
    # 格式换显示 nginx 配置参数
    2>&1 nginx -V | xargs -n1
    2>&1 nginx -V | xargs -n1 | grep lua
    

    上面只是一些 Nginx 的基础知识,如果想要了解更多的 Nginx 内容,你可以参考

    深入理解 Nginx

    img

    学习 Nginx ,跟着陶辉老师就够了,这本书首先通过介绍官方 Nginx 的基本用法和配置规则,帮助读者了解一般 Nginx 模块的用法,然后重点介绍了如何开发 HTTP 模块(含 HTTP 过滤模块)来得到定制化的 Nginx,其中包括开发—个功能复杂的模块所需要了解的各种知识,并对内存池的实现细节及 TCP 协议进行了详细介绍;接着,综合 Nginx 框架代码分析了 Nginx 架构的设计理念和技巧,此外,还新增了如何在模块中支持 HTTP变量,以及与 slab 共享内存等相关的内容,相信通过完善,可进一步帮助读者更好地开发出功能丰富、性能—流的 Nginx 模块。

    如果大家有兴趣,陶辉老哥在极客时间开了一门关于 Nginx 的课程,大家可以详细了解下。

    Nginx 是需要你在工作中逐渐掌握的,它涉及内容如下

    Netty

    Netty 是一个利用 Java 的高级网络的能力,隐藏其背后的复杂性而提供一个易于使用的 API 的客户端/服务器框架。
    Netty 是一个广泛使用的 Java 网络编程框架(Netty 在 2011 年获得了Duke’s Choice Award,见https://www.java.net/dukeschoice/2011)。它活跃和成长于用户社区,像大型公司 Facebook 和 Instagram 以及流行 开源项目如 Infinispan, HornetQ, Vert.x, Apache Cassandra 和 Elasticsearch 等,都利用其强大的对于网络抽象的核心代码。

    大家可以看看这篇文章 Netty入门教程——认识Netty

    Netty 推荐一本书

    Netty 实战

    img

    这一本书循序渐进的为你介绍了 Netty 各个方面内容,本书共分为4个部分:第一部分详细地介绍Netty 的相关概念以及核心组件,第二部分介绍自定义协议经常用到的编解码器,第三部分介绍Netty 对于应用层高级协议的支持,会覆盖常见的协议及其在实践中的应用,第四部分是几个案例研究。此外,附录部分还会简单地介绍 Maven,以及如何通过使用 Maven编译和运行本书中的示例。

    ES

    ES 的全称是 Elasticsearch,这个名字挺难拼写的,关于 ES 是干啥的以及 ES 入门汇总,你可以参考这一篇

    Elasticsearch入门,这一篇就够了

    更多关于 ES 的内容,你可以看这本书

    Elasticsearch 实战

    img

    全书共分两个部分,第一部分解释了核心特性,内容主要涉及 Elasticsearch 的介绍,数据的索引、更新和删除,数据的搜索,数据的分析,使用相关性进行搜索,使用聚集来探索数据,文档间的关系等;第二部分介绍每个特性工作的更多细节及其对性能和可扩展性的影响,以便对核心功能进行产品化,内容主要涉及水平扩展和性能提升等。

    Elasticsearch 源码解析与优化实战

    img

    《Elasticsearch源码解析与优化实战》介绍了Elasticsearch的系统原理,旨在帮助读者了解其内部原理、设计思想,以及在生产环境中如何正确地部署、优化系统。系统原理分两方面介绍,一方面详细介绍主要流程,例如启动流程、选主流程、恢复流程;另一方面介绍各重要模块的实现,以及模块之间的关系,例如 gateway 模块、allocation 模块等。本书的最后一部分介绍如何优化写入速度、搜索速度等大家关心的实际问题,并提供了一些诊断问题的方法和工具供读者参考。

    我刚开始学 ES 的时候,竟然不知道 ELK 是什么。。。。。。那么 ELK 是啥,为啥要搞 ELK ?

    为什么用到ELK:
    一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统,将所有节点上的日志统一收集,管理,访问。
    一般大型系统是一个分布式部署的架构,不同的服务模块部署在不同的服务器上,问题出现时,大部分情况需要根据问题暴露的关键信息,定位到具体的服务器和服务模块,构建一套集中式日志系统,可以提高定位问题的效率。
    一个完整的集中式日志系统,需要包含以下几个主要特点:

    • 收集-能够采集多种来源的日志数据
    • 传输-能够稳定的把日志数据传输到中央系统
    • 存储-如何存储日志数据
    • 分析-可以支持 UI 分析
    • 警告-能够提供错误报告,监控机制

    ELK提供了一整套解决方案,并且都是开源软件,之间互相配合使用,完美衔接,高效的满足了很多场合的应用。目前主流的一种日志系统。

    ELK简介:
    ELK是三个开源软件的缩写,分别表示:Elasticsearch , Logstash, Kibana , 它们都是开源软件。新增了一个FileBeat,它是一个轻量级的日志收集处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具。
    Elasticsearch是个开源分布式搜索引擎,提供搜集、分析、存储数据三大功能。它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源,自动搜索负载等。
    Logstash 主要是用来日志的搜集、分析、过滤日志的工具,支持大量的数据获取方式。一般工作方式为c/s架构,client端安装在需要收集日志的主机上,server端负责将收到的各节点日志进行过滤、修改等操作在一并发往elasticsearch上去。
    Kibana 也是一个开源和免费的工具,Kibana可以为 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面,可以帮助汇总、分析和搜索重要数据日志。
    Filebeat隶属于Beats。目前Beats包含四种工具:

      1. Packetbeat(搜集网络流量数据)
      2. Topbeat(搜集系统、进程和文件系统级别的 CPU 和内存使用情况等数据)
      3. Filebeat(搜集文件数据)
      4. Winlogbeat(搜集 Windows 事件日志数据)

    官方文档:
    Filebeat:
    https://www.elastic.co/cn/products/beats/filebeat
    https://www.elastic.co/guide/en/beats/filebeat/5.6/index.html
    Logstash:
    https://www.elastic.co/cn/products/logstash
    https://www.elastic.co/guide/en/logstash/5.6/index.html
    Kibana:
    https://www.elastic.co/cn/products/kibana
    https://www.elastic.co/guide/en/kibana/5.5/index.html
    Elasticsearch:
    https://www.elastic.co/cn/products/elasticsearch
    https://www.elastic.co/guide/en/elasticsearch/reference/5.6/index.html
    elasticsearch中文社区:
    https://elasticsearch.cn/

    ELK架构图:
    架构图一:

    img

    这是最简单的一种ELK架构方式。优点是搭建简单,易于上手。缺点是Logstash耗资源较大,运行占用CPU和内存高。另外没有消息队列缓存,存在数据丢失隐患。
    此架构由Logstash分布于各个节点上搜集相关日志、数据,并经过分析、过滤后发送给远端服务器上的Elasticsearch进行存储。Elasticsearch将数据以分片的形式压缩存储并提供多种API供用户查询,操作。用户亦可以更直观的通过配置Kibana Web方便的对日志查询,并根据数据生成报表。

    架构图二:

    img

    此种架构引入了消息队列机制,位于各个节点上的Logstash Agent先将数据/日志传递给Kafka(或者Redis),并将队列中消息或数据间接传递给Logstash,Logstash过滤、分析后将数据传递给Elasticsearch存储。最后由Kibana将日志和数据呈现给用户。因为引入了Kafka(或者Redis),所以即使远端Logstash server因故障停止运行,数据将会先被存储下来,从而避免数据丢失。

    架构图三:

    img

    此种架构将收集端logstash替换为beats,更灵活,消耗资源更少,扩展性更强。同时可配置Logstash 和Elasticsearch 集群用于支持大集群系统的运维日志数据监控和查询。

    Filebeat工作原理:
    Filebeat由两个主要组件组成:prospectors 和 harvesters。这两个组件协同工作将文件变动发送到指定的输出中。

    img

    **Harvester(收割机):**负责读取单个文件内容。每个文件会启动一个Harvester,每个Harvester会逐行读取各个文件,并将文件内容发送到制定输出中。Harvester负责打开和关闭文件,意味在Harvester运行的时候,文件描述符处于打开状态,如果文件在收集中被重命名或者被删除,Filebeat会继续读取此文件。所以在Harvester关闭之前,磁盘不会被释放。默认情况filebeat会保持文件打开的状态,直到达到close_inactive(如果此选项开启,filebeat会在指定时间内将不再更新的文件句柄关闭,时间从harvester读取最后一行的时间开始计时。若文件句柄被关闭后,文件发生变化,则会启动一个新的harvester。关闭文件句柄的时间不取决于文件的修改时间,若此参数配置不当,则可能发生日志不实时的情况,由scan_frequency参数决定,默认10s。Harvester使用内部时间戳来记录文件最后被收集的时间。例如:设置5m,则在Harvester读取文件的最后一行之后,开始倒计时5分钟,若5分钟内文件无变化,则关闭文件句柄。默认5m)。

    **Prospector(勘测者):**负责管理Harvester并找到所有读取源。
    filebeat.prospectors: - input_type: log paths: - /apps/logs/*/info.log
    Prospector会找到/apps/logs/*目录下的所有info.log文件,并为每个文件启动一个Harvester。Prospector会检查每个文件,看Harvester是否已经启动,是否需要启动,或者文件是否可以忽略。若Harvester关闭,只有在文件大小发生变化的时候Prospector才会执行检查。只能检测本地的文件。

    Filebeat如何记录文件状态:
    将文件状态记录在文件中(默认在/var/lib/filebeat/registry)。此状态可以记住Harvester收集文件的偏移量。若连接不上输出设备,如ES等,filebeat会记录发送前的最后一行,并再可以连接的时候继续发送。Filebeat在运行的时候,Prospector状态会被记录在内存中。Filebeat重启的时候,利用registry记录的状态来进行重建,用来还原到重启之前的状态。每个Prospector会为每个找到的文件记录一个状态,对于每个文件,Filebeat存储唯一标识符以检测文件是否先前被收集。

    Filebeat如何保证事件至少被输出一次:
    Filebeat之所以能保证事件至少被传递到配置的输出一次,没有数据丢失,是因为filebeat将每个事件的传递状态保存在文件中。在未得到输出方确认时,filebeat会尝试一直发送,直到得到回应。若filebeat在传输过程中被关闭,则不会再关闭之前确认所有时事件。任何在filebeat关闭之前为确认的时间,都会在filebeat重启之后重新发送。这可确保至少发送一次,但有可能会重复。可通过设置shutdown_timeout 参数来设置关闭之前的等待事件回应的时间(默认禁用)。

    Logstash工作原理:
    Logstash事件处理有三个阶段:inputs → filters → outputs。是一个接收,处理,转发日志的工具。支持系统日志,webserver日志,错误日志,应用日志,总之包括所有可以抛出来的日志类型。

    img

    Input:输入数据到logstash。
    一些常用的输入为:
    file:从文件系统的文件中读取,类似于tail -f命令
    syslog:在514端口上监听系统日志消息,并根据RFC3164标准进行解析
    redis:从redis service中读取
    beats:从filebeat中读取

    Filters:数据中间处理,对数据进行操作。
    一些常用的过滤器为:
    grok:解析任意文本数据,Grok 是 Logstash 最重要的插件。它的主要作用就是将文本格式的字符串,转换成为具体的结构化的数据,配合正则表达式使用。内置120多个解析语法。
    官方提供的grok表达式:https://github.com/logstash-plugins/logstash-patterns-core/tree/master/patterns
    grok在线调试:https://grokdebug.herokuapp.com/
    mutate:对字段进行转换。例如对字段进行删除、替换、修改、重命名等。
    drop:丢弃一部分events不进行处理。
    clone:拷贝 event,这个过程中也可以添加或移除字段。
    geoip:添加地理信息(为前台kibana图形化展示使用)

    **Outputs:outputs是logstash处理管道的最末端组件。**一个event可以在处理过程中经过多重输出,但是一旦所有的outputs都执行结束,这个event也就完成生命周期。
    一些常见的outputs为:
    elasticsearch:可以高效的保存数据,并且能够方便和简单的进行查询。
    file:将event数据保存到文件中。
    graphite:将event数据发送到图形化组件中,一个很流行的开源存储图形化展示的组件。

    Codecs:codecs 是基于数据流的过滤器,它可以作为input,output的一部分配置。Codecs可以帮助你轻松的分割发送过来已经被序列化的数据。
    一些常见的codecs:
    json:使用json格式对数据进行编码/解码。
    multiline:将汇多个事件中数据汇总为一个单一的行。比如:java异常信息和堆栈信息。

    来源:博客园
    作者:Mr.Ares
    原文:https://www.cnblogs.com/aresxin/p/8035137.html

    关于 ELK 看官网文档就行了,市面上没有什么好的可以借鉴的书籍。

    Git

    Git 是一款优秀的分布式版本控制平台,代码协作通常用于团队或者多人共同开发一个项目的情况,刚开始接触代码协作可能无法理解,就是说你和你的同事共同开发一个项目的话,你们的代码也要放在一起,你提交的代码对方能够看到,对方提交的代码你也能够看到。不用在说什么我改了代码我发给你,一方面你知道你改过内容可能会有遗漏,有一些人说那记录好改了哪些文件不就行了吗?但是你这样工作量多大?而且假如你和你同事改的是同一个文件呢?还要记住同一个文件中有多少内容是改没改过的嘛?这太麻烦而且低效了,所以 Git 就是用于解决这种情况的,Git 目前是大多数企业的选择,但是仍旧还有一些传统的软件公司使用 SVN,SVN 也是代码协作平台,下面具体介绍一下 Git

    Git 是分布式的,SVN 是集中式的

    Git是分布式的,SVN是集中式的

    这是 Git 和 SVN 最大的区别。若能掌握这个概念,两者区别基本搞懂大半。因为 Git 是分布式的,所以 Git 支持离线工作,在本地可以进行很多操作,包括接下来将要重磅推出的分支功能。而 SVN 必须联网才能正常工作。

    Git 复杂概念多,SVN 简单易上手

    所有同时掌握 Git 和 SVN 的开发者都必须承认,Git 的命令实在太多了,日常工作需要掌握add,commit,status,fetch,push,rebase等,若要熟练掌握,还必须掌握rebasemerge的区别,fetchpull的区别等,除此之外,还有cherry-picksubmodulestash等功能,仅是这些名词听着都很绕。

    在易用性这方面,SVN 会好得多,简单易上手,对新手很友好。但是从另外一方面看,Git 命令多意味着功能多,若我们能掌握大部分 Git 的功能,体会到其中的奥妙,会发现再也回不去 SVN 的时代了。

    Git 分支廉价,SVN 分支昂贵

    在版本管理里,分支是很常使用的功能。在发布版本前,需要发布分支,进行大需求开发,需要 feature 分支,大团队还会有开发分支,稳定分支等。在大团队开发过程中,常常存在创建分支,切换分支的需求。

    Git 分支是指针指向某次提交,而 SVN 分支是拷贝的目录。这个特性使 Git 的分支切换非常迅速,且创建成本非常低。

    而且 Git 有本地分支,SVN 无本地分支。在实际开发过程中,经常会遇到有些代码没写完,但是需紧急处理其他问题,若我们使用 Git,便可以创建本地分支存储没写完的代码,待问题处理完后,再回到本地分支继续完成代码。

    学习 Git 的方式有很多种,但是最主要的还是你动手实践,不管是看书也好还是根据教程进行实操,你都需要实践一遍,那么 Git 的使用你就差不多了。

    Git 也有一些书籍,我推荐给你。

    Pro Git

    首推的肯定是大部分程序员入门的《Pro Git》,该书由 GitHub 的两名早期员工 Scott Chacon 和 Ben Straub 编写而成。这本书可以说是最早期,也是现今知名度最高的 Git 入门教程了。
    通过该教程你可以快速了解到 Git 与 GitHub 的基础使用,内容覆盖面广,一些知识点也都讲得较为通透,所以也有不少人拿该这本书当 Git 的使用手册,遇到不懂的问题还会跑回来查阅。
    同时该书还配套了 视频教程 供读者观看。

    img

    或者 Pro Git 中文版 Pro Git(中文版)

    Git 版本控制管理

    img

    O’Reilly 的一贯风格,清晰明了,特点是讲授了 GIT 的内部原理,而不是简单列举命令操作。使用很多例子和示意图,一目了然。

    Git 的资料有很多,这里给大家推荐几个口碑非常好的

    廖雪峰的 Git 教程可以说是做到简单清晰明了了,可以说是最好的 Git 入门指南

    Git教程

    Github Docs 的官方文档也是学习 Git 的好方式

    快速入门 - GitHub Docs
    Git 工作流程(阮一峰):http://www.ruanyifeng.com/blog/2015/12/git-workflow.html
    菜鸟教程-Git简明教程:http://www.runoob.com/manual/git-guide/
    Git Book:https://git-scm.com/book/zh/v2

    上面这些内容,如果你能够真正掌握,我觉得你已经可以吊打 95% 以上的程序员了,上面这些内容你真正掌握可能会花 5 - 10 年的时间,不同层次的程序员掌握框架的层次不同,比如对于 Kafka 这个消息中间件来说,初级程序员可能知道 Kafka 是用来干什么的,知道 Kafka 有哪些组件,会安装搭建就可以了,对于中级程序员来说,你可能需要懂一些 Kafka 的配置和参数,知道 Kafka 的架构,Kafka 和其他消息中间件的区别等。如果你是高级程序员,可能要求你会监控 Kafka,Kafka 调优,有没有研究过 Kafka 的源码,某个细节点的内部实现原理等。如果你认真研究某个领域五年以上,那么你可以称之为领域内的专家了,我说的是研究,而不是你知道了某个框架五年以上就是专家了,这个概念是完全不一样的,研究是真正去一行一行看其内部实现源码,了解它的设计思想和痛点。

    上面的这些内容可以说是针对非科班的程序员的,因为非科班程序员和科班程序员的侧重点不同,非科班程序员侧重点就是能上手干活,解决问题,科班程序员侧重点在于思路,算法等,因为他们在大学期间会仔细研究,认真打磨计算机基础。这也不是说非科班程序员不用学习计算机基础了,你在能上手干活的同时也要打牢基础,这样你才能够和科班的去竞争,去内卷,去弥补差距。

    计算机基础是内功,内功在任何时期和阶段都是需要修炼的。

    计算机基础

    计算机基础都包括哪些呢?

    计算机组成原理、操作系统、计算机网络、数据结构与算法。

    计算机组成原理

    先说计算机组成原理,这部分内容主要涉及

    • 计算机系统概述
    • 数据与运算
    • CPU 概述
    • 存储子系统概述
    • 总线和 IO 概述

    这些内容可以在 MOOC 大学上找到

    计算机组成原理_电子科技大学_中国大学MOOC(慕课)

    大家也可以看一下这本书

    img

    虽然国内教授/专家写的书不及国外,但是在国内来说已经算是不错的了,而且这本书还是颇为具有指导意义的。

    还有一本

    img

    这本书看的人比较少,但是不失为一本好书,计算机组成原理,了解汇编层的代码运行。计算机是如何执行二进制命令的。本书基于 arm 指令集架构。

    操作系统

    关于操作系统,我写了一篇如何学习的文章

    如何学好操作系统原理这门课?

    计算机网络

    关于计算机网络,我也写了一篇关于如何学习的文章,你可以参考

    计算机网络该怎么学?

    数据结构和算法

    算法书籍推荐:市面上有很多关于算法的书籍,最近非常火的《labuladong 的算法小抄》,通俗易懂的《小灰的算法之旅》等等,不过我这里只说两本最经典的算法书:《算法导论》和《算法第四版》

    关于算法如何学习,可以参考下这个回答

    如何系统地学习算法?

    关于学习的意见和建议,可以参考

    程序员cxuan:编程从入门到精通,2021小白版

    这篇回答会持续完善下,欢迎读者追更,点赞喜欢关注就是对我的爱。

    这是第一版内容,部分技术栈和知识点整理的不是很全面,这个我承认,不过如果这篇文章能够对你产生帮助,就是他的价值。

    我把这篇文章汇总成为了 PDF 版本,链接如下

    获取 PDF 链接 密码: atsg

    展开全文
  • 我希望这个书单列表内容丰富,可以涵盖很多东西。”很多程序员响应,他们在推荐时也写下自己的评语。以前就有国内网友介  “如果能时光倒流,回到过去,作为一个开发人员,你可以告诉自己在职业生涯初期应该读一本...
  • “长格式”指的是+100个句子中文档内容的数量,而内容丰富的意思是文档中除了文本之外还包含图像,数学方程式和引文/链接。 相似度 例如,当文档涵盖相同主题,使用一组通用单词或使用相同字体书写时,它们可能被...
  • 我希望这个书单列表内容丰富,可以涵盖很多东西。”  “如果能时光倒流,回到过去,作为一个开发人员,你可以告诉自己在职业生涯初期应该读一本,你会选择哪本书呢?我希望这个书单列表内容丰富,可以涵盖很多东西。...
  • 丰富的数字图书馆资源:目前我校共订购各类型中外文数据库 20 余个,通过校园网 24 小时提供数字图书馆服务,数据库内容涵盖工程技术、社会科学、人文科学、自然科学等不同学科,文献类型包括中文图书、学术期刊、...
  • 《ASP.NET 3.5入门经典--涵盖C#和VB.NET》 《Wrox-Beginning ASP.NET 3.5 CSharp and VB》 附带C#和VB源码。 很经典一本书籍,不容错过。 书名: ASP.NET 3.5入门经典——涵盖C#和VB.NET(第5版) 丛书名: 作者: ...
  • 传感器讲明教程,适合初学者或者做为参考书籍!内容丰富
  • 再次给大家推荐下我整理的这份 GitHub 上星标 115k+ 的 Java 教程,里面涵盖了 Java 所有的知识点,包括 Java 语法、Java 集合框架、Java IO、Java 并发编程和 Java 虚拟机,内容不多,只讲重点。 GitHub 星标 115k+...
  • 超硬核!兔兔阿里p7学长给的面试知识库

    万次阅读 多人点赞 2021-05-26 22:14:07
    web前端学霸笔记 面试经验系列历史文章: 这个系列离结束差的还特别多,会更新涵盖所有一线大厂的所有岗位,也可以关注一下。 最容易进的大厂工作,百度经典百题 超经典,百度最爱考的安卓Android百题 超经典,阿里...
  • 编写人:mkl 日期:2020.11.16 ... 插件丰富,自带插件基本涵盖日常所需功能(示例看下面的Demo-2) 接口丰富,可扩展性强,有能力可以无限拓展功能 界面好看,符合现代审美 提供经典、内联、沉浸无干扰三
  • 教程内容涵盖:阻塞和非阻塞IO、Channel通道、Buffer缓冲区、Selector选择器、Pipe管道、FileLock文件锁,以及Path、Files、异步FileChannel和Charset字符编码等,并通过一个多人聊天室的综合案例,把所有的NIO知识...
  • 近年来,随着我国科学的技术的飞速发展,计算机语言的内容和形式得到了极大的丰富,特别是java语言的广泛应用,它不仅是计算机语言的重要组成部分,同时也是我国程序编写的重要内容之一,java语言的出现和广泛使用,极大的...
  • 115k+ 的 Java 教程,里面涵盖了 Java 基础的所有知识点,包括 Java 语法、Java 集合框架、Java IO、Java 并发编程和 Java 虚拟机,基本上从 Java 这门编程语言的层面来说,知识点都涵盖了,关键是内容不多,只讲...
  • 涵盖内容有:算法在计算中的作用,概率分析和随机算法的介绍。本书专门讨论了线性规划,介绍了动态规划的两个应用,随机化和线性规划技术的近似算法等,还有有关递归求解、快速排序中用到的划分方法与期望线性时间...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 52,712
精华内容 21,084
热门标签
关键字:

内容涵盖丰富