Spark测试题大鹏o

1.spark的四大组件下面哪个不是(D)A.SparkStreamingBMlibCGraphxDSparkR

2.下面哪个端口不是spark自带服务的端口(C)A.8080B.4040C.8090D.18080

3.spark1.4版本的最大变化(B)AsparksqlRelease版本B引入SparkRCDataFrameD支持动态资源分配

4.SparkJob默认的调度模式(A)AFIFOBFAIRC无D运行时指定

5.哪个不是本地模式运行的个条件(D)Aspark.localExecution.enabled=trueB显式指定本地运行CfinalStage无父StageDpartition默认值

6.下面哪个不是RDD的特点(C)A.可分区B可序列化C可修改D可持久化

7.关于广播变量,下面哪个是错误的(D)A任何函数调用B是只读的C存储在各个节点D存储在磁盘或HDFS

8.关于累加器,下面哪个是错误的(D)A支持加法B支持数值类型C可并行D不支持自定义类型

9.Spark支持的分布式部署方式中哪个是错误的(D)AstandaloneBsparkonmesosCsparkonYARNDSparkonlocal

10.Stage的Task的数量由什么决定(A)

A.PartitionB.JobC.StageD.TaskScheduler

11.下面哪个操作是窄依赖(B)A.joinB.filterCgroupDsort

12.下面哪个操作肯定是宽依赖(C)AmapBflatMapCreduceByKeyDsample

14默认的存储级别(A)AMEMORY_ONLYBMEMORY_ONLY_SERCMEMORY_AND_DISKDMEMORY_AND_DISK_SER

15spark.deploy.recoveryMode不支持那种(D)A.ZooKeeperB.FileSystemDNONEDhadoop

16.下列哪个不是RDD的缓存方法(C)Apersist()BCache()CMemory()

17.Task运行在下来哪里个选项中Executor上的工作单元(C)ADriverprogramB.sparkmasterC.workernodeDClustermanager

18.hive的元数据存储在derby和mysql中有什么区别(B)A.没区别B.多会话C.支持网络环境D数据库的区别

19.DataFrame和RDD最大的区别(B)A.科学统计支持B.多了schemaC.存储方式不一样D.外部数据源支持

20.Master的ElectedLeader事件后做了哪些操作(D)A.通知driverB.通知workerC.注册applicationD.直接ALIVE

21.下列哪一项不是applicationMaster的功能(D)

A.数据切分B.为应用程序申请资源,并进一步分配给内部任务C.任务监控与容错D.所有应用的管理者

22.SparkRDD中没有的特性是(D)

A.位置优先B.分布式C.弹性D.固定大小

23.以下是Spark中executor的作用是(ABC)

A.保存计算的RDD分区数据B.向Driver反向注册C.接受Driver端发送来的任务Task,作用在RDD上进行执行D.做资源调度任务

24.Stage的Task的数量不是由什么决定(BCD)

25.spark的特点包括(ABD)

A.快速B.通用C.可延伸D.兼容性

26.Task运行不在以下选项中Executor上的工作单元(ABD)

A.DriverprogramB.sparkmasterC.workernodeD.Clustermanager

27.关于spark容错说法错误的有(AD)

A.在容错机制中,如果一个节点死机了,而且运算窄依赖,则只要把丢失的父RDD分区重算即可,依赖于其他节点

B.宽依赖开销更大

C.Checkpoint可以节约大量的系统资源

D.RDD的容错机制是基于SparkStreaming的容错机制

28.SparkRdd转换算子有(ABC)

A.mapB.filterC.mapPartitionsD.collect

29.下面哪些端口是spark自带服务的端口(ABD)

A.8080B.4040C.8090D.18080

30.关于spark中数据倾斜引发原因正确的选项有(ABCD)

A.key本身分布不均衡B.计算方式有误C.过多的数据在一个task里面D.shuffle并行度不够

31.Sparkdriver的功能是什么(ABD)

A.是作业的主进程B.负责了作业的调度C.负责向HDFS申请资源D.负责作业的解析

THE END
1.功能和作用的区别功能和作用的区别 功能是作用产生的内部根据和前提基础,客观需要是测评产生作用的外部条件,作用就是测评的功能与客观需要相结合而产生的实际效能。 1、功能:所赋予的用途。指事物或方法所发挥的有利作用或效能。 2、作用:所赋予的用途加被额外开发的用途。作用从广义上讲,如果做了某些事或者某些物品在另外一件事上http://m.chusan.com/zhongkao/72591.html
2.功能与作用的最大区别(功能与作用的区别举例)功能与作用的最大区别 功能与作用是两个概念,虽然它们看起来很相似,但实际上有很大的区别。功能主要指产品或服务所能为用户提供的特定功能,而作用则指产品或服务对用户的影响。功能与作用的区别在于前者更注重产品的基础性质,后者则更重视产品对用户的实际影响。 https://www.uslshop.com/jiankangzhishi/48116.html
3.黄小米不能与什么同吃黄小米的营养价值黄小米的功效与作用小黄米颗粒小,不黏;而大黄米颗粒大,糯性强,很黏。 小黄米富含维生素B1、B2,具有防止消化不良及口角生疮的功能;大黄米则含有人体必需的八种氨基酸、丰富的矿物质、维生素及各种微量元素,有一定“补中益气、健脾益肺”等保健功能。 上面已经说了很多的大黄米和小黄米的区别,从上面也可以看的出来虽然这两种都是粗粮https://yangsheng.120ask.com/article/122391.html
4.Linuxlinuxcsdn8.1.3 最大有效权限与删除ACL权限 8.1.4 默认ACL权限和递归ACL权限 8.2 文件特殊权限 8.2.1 SetUID 8.2.2 SetGID 8.3.3 Sticky BIT 8.3 文件系统属性chattr权限 8.4 系统命令sudo权限 第九章 文件系统管理 9.1 回顾分区和文件系统 9.2 文件系统常用命令 https://blog.csdn.net/m0_59709514/article/details/124547112
5.面试宝典二:nlp常见知识点随机梯度下降SGD:这个算法的流程就是在我们让L2范数的规则项最小,可以使得W的每个元素都很小,都接近于0,但与L1范数不同,它不会让它等于0,而是接近于0,这里是有很大的区别的哦。L2的作用就是让所有的参数都接近于0,个人理解,L2的优越性并不主要体现在让参数变小上,关键是在于让所有的参数比较均衡。也就是说所有的特征的表达能力都差不多。这样https://blog.51cto.com/u_15429890/5213769
6.Alibaba最新1000多道Java面试题汇总详解,收藏起来慢慢刷!7、形参与实参区别 8、构造方法能不能重写?能不能重载? 9、内部类与静态内部类的区别? 10、Static 关键字有什么作用? 11、final 在 java 中的作用,有哪些用法? 12、String str=”aaa”,与 String str=new String(“aaa”)一样吗? 13、讲下 java 中的 math 类有那些常用方法? https://maimai.cn/article/detail?fid=1728969401&efid=esjJLvGGL4fAr1LArgq_cQ
7.一个社招的金三银四——MySQL面试题总结如果遇到了大文本,考虑使用 Text,最大能到 4G(其中 TEXT 长度 65,535 bytes,约 64kb;MEDIUMTEXT 长度 16,777,215 bytes,约 16 Mb;而 LONGTEXT 长度 4,294,967,295 bytes,约 4Gb)。 2)效率区别 效率来说基本是 Char > Varchar > Text,但是如果使用的是 Innodb 引擎的话,推荐使用 Varchar 代替 Char。https://www.nowcoder.com/discuss/871100?channel=-1&source_id=discuss_terminal_discuss_hot_nctrack
8.山东协和学院1.骨由___、___和___及血管神经构成,其功能___、___和___作用. 2.膈有三个裂孔分别是___、___和___. 3.肩关节由___、___骨共同构成. 4.胰可分为___、___和___ 三部分. 5.左半心腔内https://www.sdxiehe.edu.cn/m/view.php?id=6207
9.生物知识点实验一:鉴定还原糖、脂肪、蛋白质分别用什么试剂?出现的现象是什么? 第二章生命活动的基本单位——细胞 §2.1细胞的结构和功能 一.细胞膜的结构和功能 1.细胞膜的结构组成:两层磷脂分子和一些蛋白质分子,细胞膜表面有糖被。糖被的组成及作用? 细胞膜的结构特点:细胞膜具有流动性,因为磷脂分子和蛋白质分子都是可https://m.pincai.com/article/2471978.htm
10.一网打尽“唯散宁”21.唯散宁与口服避孕药的最大的区别是什么? 唯散宁没有雌激素,不能避孕,避孕药避孕同时,可以长期管理内异症。 22.腺肌症造成的月经量大服用唯散宁后可以改善月经量吗? 可以改善月经量,因为可以使内膜萎缩。 23.巧囊术后,单侧如今复发,目前没有怀孕,这样的情况吃药控制可以吗?并且想早日怀孕,吃唯散宁可以吗? https://sns.guahao.com/mip/topic/IoDLb186228582253756418