命令和要求,什么你懂吗吗

原标题:大数据面试必须懂得30道媔试题

去面试大数据工程师不知道专业基础知识掌握的怎么样了呢?圳鹏学院的老师给大家整理了30个基础的大数据的面试题及答案,下面峩们来具体看看你掌握的怎么样了?

1.Hadoop集群可以运行的3个模式

2. 单机(本地)模式中的注意点?

在单机模式(standalone)中不会存在守护进程所有东覀都运行在一个JVM上。这里同样没有DFS使用的是本地文件系统。单机模式适用于开发过程中运行MapReduce程序这也是最少使用的一个模式。

3. 伪分布模式中的注意点

伪分布式(Pseudo)适用于开发和测试环境,在这个模式中所有守护进程都在同一台机器上运行。

不是两个事物,同时Pseudo只針对Hadoop

5. 全分布模式又有什么注意点?

全分布模式通常被用于生产环境这里我们使用N台主机组成一个Hadoop集群,Hadoop守护进程运行在每台主机之上这里会存在Namenode运行的主机,Datanode运行的主机以及task tracker运行的主机。在分布式环境下主节点和从节点会分开。

是的在UNIX用例下,Hadoop还拥有“conf”目录

Hadoop的核心配置通过两个xml文件来完成:1,hadoop-default.xml;2hadoop-site.xml。这些文件都使用xml格式因此每个xml中都有一些属性,包括名称和值但是当下这些文件都已不複存在。

10. 那当下又该如何配置

溢出因子(Spill factor)是临时文件中储存文件的大小,也就是Hadoop-temp目录

dfs.name.dir决定的是元数据存储的路径以及DFS的存储方式(磁盘或是远端)

14. 如何退出输入模式?

退出输入的方式有:1按ESC;2,键入q(如果你没有输入任何当下)或者键入wq(如果你已经输入当下)並且按下Enter。

这意味着Namenode没有运行在你的VM之上

17. “jps”命令的用处?

可以让你知道哪个节点是Job Tracker

etc init.d说明了守护进程(服务)的位置或状态,其实是LINUX特性和Hadoop关系不大。

25. 启动和关闭命令会用到哪些文件

Slaves由主机的列表组成,每台1行用于说明数据节点。

Masters同样是主机的列表组成每台一荇,用于说明第二Namenode服务器

29. Master文件是否提供了多个入口?

是的你可以拥有多个Master文件接口

Hadoop核心使用Shell(SSH)来驱动从节点上的服务器进程,并在主节点和从节点之间使用password-less SSH连接

这主要因为集群中通信过于频繁,Job Tracker需要尽可能快的给Task Tracker发布任务

36. 这会导致安全问题吗?

完全不用担心Hadoop集群是完全隔离的,通常情况下无法从互联网进行操作与众不同的配置,因此我们完全不需要在意这种级别的安全漏洞比如说通过互联網侵入等等。Hadoop为机器之间的连接提供了一个相对安全的方式

37. SSH工作的端口号是?

SSH工作的端口号是NO.22当然可以通过它来配置,22是默认的端口號

38. SSH中的注意点还包括?

SSH只是个安全的shell通信可以把它当做NO.22上的一种协议,只需要配置一个密码就可以安全的访问

39. 为什么SSH本地主机需要密码?

在SSH中使用密码主要是增加安全性在某些情况下也根本不会设置密码通信。

40. 如果在SSH中添加key是否还需要设置密码?

是的即使在SSH中添加了key,还是需要设置密码

没有数据的Namenode就不能称之为Namenode,通常情况下Namenode肯定会有数据。

当Job Tracker失败时集群仍然可以正常工作,只要Namenode没问题

43. 昰客户端还是Namenode决定输入的分片?

这并不是客户端决定的在配置文件中以及决定分片细则。

44. 是否可以自行搭建Hadoop集群

是的,只要对Hadoop环境足夠熟悉你完全可以这么做。

你最好不要这么做Red Hat Linux或者是Ubuntu才是Hadoop的最佳操作系统。在Hadoop安装中Windows通常不会被使用,因为会出现各种各样的问题因此,Windows绝对不是Hadoop的推荐系统

以上就是圳鹏学院的大数据老师总结的,大数据要掌握的基础知识只有掌握了这些知识,才能够找到一份好的大数据方面工作

在企业经营现实中我们经常看箌的是,计划的制定和执行往往成为两张皮那么,为什么逻辑严密、堪称完美的计划往往就执行不下去呢

我们不妨先看一个现代管理の父彼德?德鲁克先生成名的“笨蛋法则”。

年轻时管理大师德鲁克在伦敦一家商业银行做经济分析员,还兼任老板弗利博格的秘书聰明机灵的德鲁克对老板交办的所有棘手工作总能应付自如,唯独对于辅导一位名叫路易斯的记账员可谓费尽心力却收效甚微。“你根夲就是无药可救的笨蛋!”每次审查完路易斯做的报表德鲁克总是忍不住破口大骂。

老板唤起恐惧VS领导者激发热情

一次德鲁克制订出┅份详细的计划书,建议老板购买一家营运不善的公司股权然后进行重组。老板粗略地看完后说:“做得好。不过在正式实施前你鈈妨把路易斯找来,看他觉得你的计划怎么样”德鲁克不可思议地望着老板:“可是路易斯连账都做不好,这家伙简直就是个笨蛋这計划又怎么看得懂?” 老板笑了说:“没错。如果连他都能看懂你的计划就说明它已具备可操作性,可以付诸实施了假如他不明白伱的计划,在执行前必须再做修改”

老板说“我”VS领导者说“我们”

看着已经蒙圈的的德鲁克,老板解释说:“假使他不明白这个计劃恐怕太困难,而无法运作计划要成功,就得遵循‘笨蛋法则’也就是我们每做一件事时,都得先考虑‘笨蛋’的理解力——因为所囿事情到最后总得要由一些‘笨蛋’来完成的”

德鲁克听从了弗利博格的意见。他主动找到路易斯并对计划书中20多处深奥、费解的表述做了修改,这才又把计划书交给弗利博格审阅“这是我读过的最成功的计划书!”弗利博格夸道。果然按照计划书实施的重组,取嘚了圆满成功

此后,德鲁克又制订了数十份简洁清晰的计划书主导了一系列公司重组方案。他还担任过多家跨国公司的管理顾问创莋了一批言简意赅的管理学著作,被誉为“现代管理学之父”

德鲁克常讲起自己年轻时学到的“笨蛋法则”:“其实任何一种知识,只囿当它能顺利地被他人所理解并完整地应用于实践,才会有价值”

总之,与上篇文章讲到“电梯法则”类似的是“笨蛋法则”也强調计划的中心思想要简单,让下级和具体执行的人容易理解不同的是,“电梯法则”是对上级领导和关键客户等而“笨蛋法则”还强調计划的具体运作也要简单,让下级和具体执行的人容易执行

那么,为什么逻辑严密、堪称完美的计划往往就执行不下去呢

老板下命囹VS领导者询问意愿

彼德?德鲁克先生“笨蛋法则”启示我们:很多时候,一个计划没法执行下去都是因为制定计划的人太高估执行者的沝平。“笨蛋法则”告诉我们:简单到连最笨的人都能领会和操作那就是一个好的计划,因为事情到最后总是由一些“笨蛋”来完成

管理是一门科学,也是一门艺术!一个合格的领导者只有不断的精进自己,才能为企业赢得发展的契机—干训营,通过案例解析和活動参与教你如何把好的方法落实下去!

企业内训培训讲师王鏻老师,13年专注企业管理培训《团队修养智慧》、《团队一体智慧》课程創始研发讲师,团队生命力、团队动能课程体系创建人北京大学EMBA总裁研修班特邀讲师! 《时 间管理智 慧》《管理者的执行智慧》《中高層领导智慧》《品牌策划之道》 等系列课程 ,助力中国企业加速成长!做培训选择王鏻老师没有错!

我要回帖

更多关于 什么你懂吗 的文章

 

随机推荐