运维博客-CSDN博客

荐面试还搞不懂redis，快看看这40道面试题（含答案和思维导图）

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

Redis 面试题1、什么是 Redis?.2、Redis 的数据类型？3、使用 Redis 有哪些好处？4、Redis 相比 Memcached 有哪些优势？5、Memcache 与 Redis 的区别都有哪些？6、Redis 是单进程单线程的？7、一个字符串类型的值能存储最大容量是多少？8、Redis 的持久化机制是什么？各自的优缺点？9、Redis 常见性...

: 程序员追风; -; 21502; 53

Linux文件操作高频使用命令

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

文章目录0.新建操作：1.查看操作2.删除操作3.复制操作4.移动操作：5.重命名操作：6.解压压缩操作0.新建操作：mkdir abc #新建一个文件夹touch abc.sh #新建一个文件1.查看操作查看目录：ll #显示目录文件详细信息查看文件内容：cat|head|tail命令cat abc.txt #查看abc的内容head -5 abc.txt #...

: freesOcean; -; 34055; 24

Flume 基本使用

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

1.通过telnet 进行数据的传输 1.1.0 创建一个文集夹mkdir tmpconf 1.1.1 创建一文件并必须是（.conf）结尾touch tmpconf/a1.conf1.1.2添加配置信息# 定义这个agent中各组件的名字a1.sources = r1a1.sinks = k1a1.channels = c1# 描述和配置source组...

: ✌听风223232✌✌; -; 1837

【JAVA】RPC基础

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

一概述Spark Streaming底层的数据处理单位是：DStream ; 主要是处理流式数据(数据一直不停的在向Spark程序发送)，这里可以结合 Spark Core 和 Spark SQL 来处理数据，如果来源数据是非结构化的数据，那么我们这里就可以结合 Spark Core 来处理，如果数据为结构化的数据，那么我们这里就可以结合Spark SQL 来进行处理。特性易用可以像编...

: 菜丸子; -; 71

elastic search（一）概述

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

一、分段存储elastic search以下统称es底层使用Lucene，lucene使用基于倒排索引和分段（segment）存储的方式完成数据索引。将一个索引文件分成了许多子文件，每个子文件就叫做段（索引中最小存储单元），段具有不变性，一旦索引数据被写入到硬盘就不可再修改1.1数据操作过程：新增：新增索引数据时，由于段的不变性，所以会新建一个段存储新数据。删除：删除索引数据时，由于段...

: herokang; -; 26

你使用过 Git 吗？也许你已经使用了一段时间，但它的许多奥秘仍然令人困惑。Git 是一个版本控制系统，是任何软件开发项目中的主要内容。通常有两个主要用途：代码备份和代码版本控制。你可以逐步处理代码，在需要回滚到备份副本的过程中保存每一步的进度！常见的问题是 Git 很难使用。有时版本和分支不同步，你会花很长时间试图推送代码！更糟糕的是，不知道某些命令的确切工作方式很容易导致意外删除或覆盖部分...

: 武培轩; -; 6201; 49

Sqoop导入导出常见错误（持续更新版）

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

报错信息：ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Hive exited with status 1原因1：mysql中的hive元数据编码格式是UTF8导致的，修改为latin1即可原因2：hive和hbase引用了不同版本的libthrift...

: 默默走开; -; 1380; 3

Hive性能调优之数据倾斜(2)

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

Map数<1>通常情况下，作业会通过input的目录产生一个或者多个map任务。主要的决定因素有：input的文件总个数，input的文件大小，集群设置的文件块大小(目前为128M，可在hive中通过set dfs.block.size;命令查看到，该参数不能自定义修改)；<2>举例： ...

: Alice菌; -; 1486

Python快速编程入门课后程序题答案

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

前言本文只是简单的整理了一下课后习题的编程题，具体的填空、选择、判断可以见:Python快速编程入门课后习题答案第一章1、编写一个Python程序，输出如下图效果。+++++++++++ +++++++++++print("+++++++++++")print("+ +")print("+++++++++++")2、编写一个Pyt...

: 子夜葵; -; 12897; 7

IDEA里常见设置及配置-----一文解决你的IDEA配置问题

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

caused by java.lang.NoclassDefFoundError javax/xml/blind/JAXBException包报错延伸的配置常见配置：1.在IDEA里，点击项目鼠标右键找到Open Module Settings,①Project,Project SDK 选择为9以下，jdk9以上里面不含这个包，故报错。还有Project language leve...

: 飞火龙在天; -; 20983

Hive性能优化之推测执行(6)

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

在分布式集群环境下，因为程序Bug（包括Hadoop本身的bug），负载不均衡或者资源分布不均等原因，会造成同一个作业的多个任务之间运行速度不一致，有些任务的运行速度可能明显慢于其他任务（比如一个作业的某个任务进度只有50%，而其他所有任务已经运行完毕），则这些任务会拖慢作业的整体执行进度。为了避免这种...

: Alice菌; -; 1450

2019 行政区划-乡镇界（乡镇边界、乡镇面）shp数据

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

2019 行政区划-乡镇界（乡镇边界、乡镇面）数据-SHP全国行政区划shp矢量数据（精确到乡镇级别）数据范围：全国行政区划数据类型：面状数据-全国各省、市、县乡镇边界数据。全国各省行政区划数据，区县边界、区县界等。数据属性：常规行政区划属性数据格式：SHP数据（arcgis矢量数据格式）应用行业：智慧城市、公共应急管理、城管、智慧园区管理、房产、移动电信、土建、城市规划相...

: GeoHey; -; 6049

reduce端join与map端join算法实现

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

本篇博客小菌为大家带来的是MapReduce中reduce端join与map端join算法的实现。reduce端join算法实现先让我们来看下需求,有下面两种表格:订单数据表 t_order...

: Alice菌; -; 1373

Hive性能调优之JVM重用(5)

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

JVM重用是Hadoop调优参数的内容，其对Hive的性能具有非常大的影响，特别是对于很难避免小文件的场景或task特别多的场景，这类场景大多数执行时间都很短。 Hadoop的默认配置通常是使用派生JVM来执...

: Alice菌; -; 1438

shell脚本（二）shell基本运算符

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

（一）shell 基本运算符原生bash不支持简单的数学运算，但可以通过其他命令来实现，例如awk 和expr（express)expr 是一款表达式计算工具，使用它能完成表达式的求值操作。注意两点：（1）表达式与运算符之间要有空格。（2）完整的表达式要被``包含（反引号）。（3）条件表达式放在方括号之间，而且要有空格。（4）乘号（*）前面必须加反斜杠（)才能算术运算符...

: 人无再少年97; -; 98; 1

Hive经典面试题

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

什么是Hive?Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能（HQL）。2.HIve的意义(最初研发的原因)减少开发人员的开发成本和学习成本。3.Hive的内部组成模块，作用分别是什么元数据：描述数据的数据内部执行流程：解析器（解析SQL语句）、编译器（把SQL语句编译成MapReduce程序）、优化器（优化...

: Alice菌; -; 1454

Hadoop各组件详解（Sqoop篇持续更新版）

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

一、概述Apache Sqoop是在Hadoop生态体系和RDBMS体系之间传送数据的一种工具。来自于Apache软件基金会提供核心的功能有两个：导入、迁入导出、迁出导入数据：MySQL，Oracle 导入数据到 Hadoop 的 HDFS、HIVE、HBASE 等数据存储系统导出数据：从 Hadoop 的文件系统中导出数据到关系数据库 mysql 等 Sqoop 的本质还是一个命令...

: 默默走开; -; 2567; 6

Hive：use BLOB or TEXT instead com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException 第一次安装Hive创建表

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

关于第一次安装好Hive后使用Hive创建表不成功的问题提供一套解决方案环境：　　　　Vmware 15.5　　　　Centos 6.9　　　　Hadoop-2.6.0-cdh5.14.0　　　　Hive-1.1.0-cdh5.14.0　　　　jdk1.8.0_144问题可能原因：　　　　MySQL字符集不对应问题。解决方案：　　　　更改MySQL Hive的字符集alter...

: 愿此生永无bug; -; 992

Hive基本操作(持续更新ing)

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

本篇博客,小菌分享的是关于Hive的基本操作!数据库的基本操作创建数据库 create database [ if not exists ] myhive ;说明：hive的表存放位置模式是由hive-site.xml当中的一个属性指定的<name>hive.metas...

: Alice菌; -; 1374

Hive性能调优之并行执行(3)

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

Hive会将一个查询转化成一个或者多个阶段。这样的阶段可以是MapReduce阶段、抽样阶段、合并阶段、limit阶段。或者Hive执行过程中可能需要的其他阶段。默认情况下，Hive一次只会执行一个阶段。不过，某个特定的job可能包含众多的阶段，而这些阶段可能并非完全互相依赖的，也就是说有些阶段是可以并...

: Alice菌; -; 1459

MapReduce之WordCount字数统计

选择理由，精准屏蔽

推荐不准: 其它

旧闻、重复

内容质量差

第一次WordCount小游戏在idea客户端上面进行WordCount统计1:创建mapper类继承mapper(选hadoop类型)public class wordcountMapper extends Mapper<LongWritable, Text,Text, IntWritable> {//LongWritable(表示mapper输入数据的key每一行数据的编号...

: 溪水流长; -; 1185