与Hadoop之间的PK Spark胜算几何？
发表于 11:29|
来源慧都控件网|
作者如影随形
摘要：虽然Spark活跃在Cloudera、MapR、Hortonworks等众多知名大数据公司，但是如果Spark本身的缺陷得不到及时处理，将会严重影响Spark的普及和发展。
一说大数据，人们往往想到Hadoop。这固然不错，但随着大数据技术的深入应用，多种类型的数据应用不断被要求提出，一些Hadoop被关注的范畴开始被人们注意，相关技术也迅速获得专业技术范畴的应用。最近半年来的Spark之热就是典型例子。Spark是一个基于RAM计算的开源码ComputerCluster运算系统，目的是更快速地进行数据分析。Spark早期的核心部分代码只有3万行。Spark提供了与HadoopMap/Reduce相似的分散式运算框架，但基于RAM和优化设计，因此在交换式数据分析和datamining的Workload中表现不错。进入2014年以后，Spark开源码生态系统大幅增长，已成为大数据范畴最活跃的开源码项目之一。Spark之所以有如此多的关注，塬因主要是因为Spark具有的高性能、高灵活性、与Hadoop生态系统完美融合等叁方面的特点。首先，Spark对分散的数据集进行抽样，创新地提出RDD(ResilientDistributedDataset)的概念，所有的统计分析任务被翻译成对RDD的基本操作组成的有向无环图(DAG)。RDD可以被驻留在RAM中，往后的任务可以直接读取RAM中的数据；同时分析DAG中任务之间的依赖性可以把相邻的任务合并，从而减少了大量不准确的结果输出，极大减少了HarddiskI/O，使复杂数据分析任务更高效。从这个推算，如果任务够复杂，Spark比Map/Reduce快一到两倍。其次，Spark是一个灵活的运算框架，适合做批次处理、工作流、交互式分析、流量处理等不同类型的应用，因此Spark也可以成为一个用途广泛的运算引擎，并在未来取代Map/Reduce的地最后，Spark可以与Hadoop生态系统的很多组件互相操作。Spark可以运行在新一代资源管理框架YARN上，它还可以读取已有并存放在Hadoop上的数据，这是个非常大的优势。虽然Spark具有以上叁大优点，但从目前Spark的发展和应用现状来看，Spark本身也存在很多缺陷，主要包括以下几个方面：稳定性方面，由于代码质量问题，Spark长时间运行会经常出错，在架构方面，由于大量数据被缓存在RAM中，Java回收垃圾缓慢的情况严重，导致Spark性能不稳定，在复杂场景中SQL的性能甚至不如现有的Map/Reduce。不能处理大数据，单独机器处理数据过大，或者由于数据出现问题导致中间结果超过RAM的大小时，常常出现RAM空间不足或无法得出结果。然而，Map/Reduce运算框架可以处理大数据，在这方面，Spark不如Map/Reduce运算框架有效。不能支持复杂的SQL统计；目前Spark支持的SQL语法完整程度还不能应用在复杂数据分析中。在可管理性方面，SparkYARN的结合不完善，这就为使用过程中埋下隐忧，容易出现各种难题。虽然Spark活跃在Cloudera、MapR、Hortonworks等众多知名大数据公司，但是如果Spark本身的缺陷得不到及时处理，将会严重影响Spark的普及和发展。本文转载自：
推荐阅读相关主题：
CSDN官方微信
扫描二维码,向CSDN吐槽
微信号：CSDNnews
相关热门文章英国留欧胜算几何？要看“三喵军团”还能在法国待多久……
很高兴周末又快到了！各位从事投资活动的朋友终于可以歇口气了，铁杆球迷们今晚也尽情熬夜看球，用不着担心第二天上班迟到了……话说最近的两大热点话题，其实都跟大不列颠与北爱尔兰联合王国——这个曾经的“日不落”帝国有关。碰巧的是昨晚欧洲杯B组次轮的小组赛就有那么一场“英伦德比”，最终英格兰在最后时刻逆转威尔士艰难取胜，晋级淘汰赛希望大增。话说在这届欧洲杯的预选赛中，除苏格兰外，英国的其他三支足球队——英格兰、威尔士和北爱尔兰都成功晋身决赛圈。同时英格兰对阵威尔士的比赛更是被安排在北京时间晚上九点开始，这对于关注英国足球的中国乃至亚太地区的球迷而言更是一大福音。作为曾经的“日不落帝国”，英国从此前两三个世纪开始已经对远东和亚太地区有着相当的经营，英式文化也漂洋过海落地生根。其中就包括起源于英国的现代足球文化。近二十年来，英格兰超级联赛也很重视在全球范围的推广，甚至为了照顾亚洲地区的观众，将好些重点比赛安排在当地时间的中午，以便远东球迷尽兴。无怪乎英伦三岛的球队和球星在东亚尤其是大中华区广受欢迎，粉丝遍地。由于各种历史渊源，英国在世界足球领域还享有一项待遇——可以派出四支独立代表队参加国际大赛，包括英格兰、苏格兰、威尔士以及北爱尔兰，而非单独的英国队。但这却不符合奥运会的组队原则，因此英国一直没派出代表队参加奥运会足球赛。直到2012年的时候，为了在本土举行的伦敦奥运会上冲击冠军，英国人于是破例派出一支星光熠熠的联合代表队参赛。可惜这支人才济济的队伍并未能发挥出应有的水平，在四分之一决赛中被“亚洲虎”韩国队击败。这实在让堂堂大英帝国的老脸很挂不住……
Ctrl+D&将本页面保存为书签，全面了解最新资讯，方便快捷。如果中国和菲律宾真的打，中国的胜算几何？_百度知道现场就餐的市民挤爆大门，场面极为混乱。
老人以拿钱给儿子为由，要儿子回家详谈养老。
声明：本文由入驻搜狐公众平台的作者撰写，除搜狐官方账号外，观点仅代表作者本人，不代表搜狐立场。
　　中美由于都是核大国，真正两国打起来的可能性是非常小的，如果因为台湾问题、或南海问题真的打起来了，中国的胜算有几何? 回答这个问题，我们首先考虑到是中美之战是全面战争还是局部冲突，全面战争意味着是第三次世界大战，因此，全面战争的爆发几率很小，况且现在经济全球化相当深入，真正打起来没有赢家。台湾、与南海由于与美国的重要国家利益相关并不大，美军反动将领就算想全面开战，也必难获得美国会的授权，而且局部战争的可能性相对来说要大得多，而局部战争，美国也讨不到多大的便宜。
　　点击图片进入下―页
　　如果中美全面开战，必会是集团之间的战争，如果北约国家也参加进来，势必会把俄罗斯也卷进来，以美国为首的北约集团虽然整体力量要强于中俄，但陆军力量无论如果都无法战胜中俄，况且中俄都有大量的核武器，要想像二战时期一样完全占领中俄领土，没有那种可能性，最后结局如果不是相互妥协就是相互回到石器时代，第三世界是没有什么战胜国的，这是现实。
　　看一看中美之间各自的优势与劣势，你就知道如果美国与中国全面开打，美国也难讨到什么便宜的原因。
　　点击图片进入下―页
　　美国的优势是技术优势，而中国的优势是后勤优势。
　　美国的技术优势大家都知道，相比中国，美国在某些方面有技术优势，但是，南海与台湾地理上就在中国的家门口，而离美国本土却相隔几万里，开战时间一长，后勤工作对美军来说就头大了。
　　美国与中国的国力相比，非常像当年的纳粹德国与前苏联国力的对比，纳粹德国相比当年的前苏联有技术优势力，但前苏联有数量上的优势，中国工业产值比美国大百分之五十，钢铁产量是美国的七倍，人口是美国的四倍，持久的消耗战中，美国必会败下阵来。
　　当年纳粹德国由于有技术优势，一个德国师可以抗击苏联的三个师，但为何纳粹德国最后还是以失败收场呢，主要原因无非有三个，1、战场就在苏联家门口，苏联的后勤工作比纳粹德国的容易得多。2、苏联有着比纳粹德国还要大一些的工业体系。3、前苏联的人口是纳粹德国的三倍以上，长期的消耗战，纳粹德国必输无疑。
　　美国真正的优势是远洋封锁，破坏中国的对华贸易来对付中国，但事实上这招虽毒，但较果可能并不大，中国与日本不同，主要原因是，1、中国自身资源本身就非常丰富，即使是石油中国本地也产，战时即使本国石油，供给军队用油也不可能饿死中国，而且还可以得到俄罗斯的石油。2、中国本身的内部市场就很大，即使完全不同外界做生意，中国通过内需也倒不了。
　　点击图片进入下―页
　　中美开战，美国是输不起的，以我看来美国这次在南海如此高调，只不过是虚张声势，在给小弟们打气、撑腰。而真的要跟中国在南海拉开场子大干一场，不是看不起美国它真没这个勇气，它的顾虑太多了，它全球利益太多了，而如果开战，美国赌上的是整个第一岛链、乃至西太平洋、甚至是全球霸权。
　　点击图片进入下―页
　　南海、台湾并非美国的重大全球利益，但对中国的意义却完全不同，这些地方却是中国的至关重要的国家利益，一旦开战，中国只有硬干到底，而美国又怎么可能为这些不疼不痒的地方与中国拼命。
　　美国想的是学一战与二战时期的做法，先让别得国家先打得精疲力竭，然后自己出来收拾残局，但是那些国家来进攻中国?除了美国，还不是都是鸡蛋碰石头，没有哪个国家会那么傻，甘愿当炮灰，到时候怕是欧洲国家怕被俄罗斯乘机占领，先跳出来反对了。
　　当然，美国最希望是日本先跳出来与中国开战，但日本是知道与中国开战的后果的，与中国先开战，无论最后中美是否开战，日本必会先毁灭，日本如果敢于先对华开战，中国必会新账老账与他一同算，日本不可能成赢家，日本必会完全的毁灭。中国和日本太近了，同在亚洲，中国若在军事经济和政治上掘起，日本在亚洲势必无法保证现如今的地位，加上中日之间在东海、钓鱼岛以及历史问题上的矛盾，日本在南海给中国找麻烦，遏制中国崛起是一个必然选择，但你说要他要和中国真刀真枪开战，那不太现实，毕竟他离中国实在太近了;现在不比二战时期，二战时间中国没有办法攻击日本的本土，而现在可对日本的本土进行毁灭性的打击。
　　局部的战争中国也根本不怕美国，现在与二战时期情况不同，二战时间再强的陆军对海军也没有任何办法。而现在由于飞机性能的提升与各种导弹的出现，陆军照样可打击海军，中国现在有能力打沉美航母，美本土的战机如没有航母靠什么飞过来?缺乏空中支援的美国拿什么与中国一战，用军舰吗?能敌得中国海、空、陆导弹一体化打击吗?美国军事最大的软肋是靠航母远程运送军事力量，美帝的轰炸机、预警机等没有战斗机的护送敢飞吗?战斗机没航母能发挥作用吗?
　　点击图片进入下―页
　　东盟四周的小国哪个敢把领土送给美国做军事基地，我们的陆军就占领那里，美国虽然有冲绳与关岛军事基地，但在长期的军事打击中这些基地根本上是用不了的。即使能用又能集结多少点军力?与依托大陆的解放军抗衡，时间一长，又能有几何胜算?
　　点击图片进入下―页
　　大国战争的胜利主要还是看暴兵的能力与军事科技两项，这两项中暴兵能力中国强于美国，主要原因暴兵能力与工业、人口、财力相关，这方面中国并不弱于美国，美国占优的是军事科技，但中国比美国的军事科技是落后，但是并不是想像中的大，美国能造的东西中国基本上也都能造。
　　还是那句话，美国绝不是国际上的雷锋，绝不是一个为别国利益火中取粟的主，当年中国的国力远不及的现在，但有敢战、敢于斗争的思想，越南战争，中国只是划了个北纬17度线，美国都老老实实的不敢越过，现在你要他冒和对方同归于尽的代价，为别人腾地方，就是傻瓜也不会干。
　　中美会因南海开打？新加坡一语令白宫难堪
　　为什么中美南海紧张是可管控的 南海领土争端已演变为中美关系中的半场危机，威胁到地区和平与稳定。但是，有充分理由相信目前的危机是可管控的。 第一个原因是我们可以预料事态发展是例行化的。以前有过类似情况。冷战时期，美苏部队频频抵近接触。但双方都懂得遵守某些不成文规则，以防发生彼此都不愿见到的事件。
　　如今在南海，中国海军和海上执法机构的所有人员都知道，美国军舰或飞机会偶尔出现、逼近然后离开。这并不会消除中国飞行员或船长借此展示勇气或爱国心的可能性。
　　点击图片进入下―页
　　闯入南海美国航母编队
　　但中国人心知肚明，美国人只是表明立场，完事了就离开，对中国在该区域的设施并没有影响。
　　所谓的航行自由行动实际上是美方的弱反应，只有象征意义，对此中国人应该容易容忍――尽管口头上要表现得强硬。
　　点击图片进入下―页
　　危机可控的第二个原因在于，目前的南海危机并不表明中国已开始试图把美国的战略影响力逐出本地区。南海争端不是中国现任领导人制造的，而是以前遗留下来的。无疑，北京想要赢在长远。但中国活动变得频繁，固然显示了其咄咄逼人，却似乎也反映了(北京的)被动反应和机会主义。
　　菲律宾向仲裁法庭提起诉讼后，中国加强自己在南海地位的紧迫性增加了。战略上，中国的填海造岛活动堪称精明，至少短期而言是这样。北京肯定坚信，美国或任何对立声索国不会出手阻止，因为那等同于公然战争行为。
　　目前北京的政策显示，相比前任，中国现任领导人不太担心中国对地区国家采取强势态度所产生的风险。但若中国的南海活动仅限于巩固在领土争端中的地位，那么与美国的紧张上升就只是预料中的结果，而非大战的开始。
　　这样的话，中国的目标将是保住面子，并把紧张降到最低限度。从中方观点看，这种战略似乎容易快速见效。
　　点击图片进入下―页
　　中国南海岛屿
　　点击图片进入下―页
　　中国海军南海演习
　　北京拿下南海八国笑到最后 美国惨败
　　本月19日美国空军6加战机悍然飞跃我黄岩岛附近空域，执行其所谓的“航行和飞跃自由”任务，实则是对中国主权的严重挑衅。对此我国防部有理有利有节地回复了一句话：中国军队将采取一切必要措施，维护国家主权和安全。
　　自2012年中菲黄岩岛对峙以来至今已有4年时间，在这几年里美国一直在中国南海周边进行各种战略破坏。使得中国的“搁置争议，共同开发”的南海和平主张受到了冲击。不可否认，美国这一系列的战略部署对中国在南海的格局确实产生了变化。
　　南海战云密布 北京富贵险中求
　　点击图片进入下―页
　　美军战机日前飞越黄岩岛
　　这个变化有利有弊：
　　弊，就是过去的“搁置争议，共同开发”塑造和平的周边环境受到了一定程度的破坏;
　　利，就是我们在南海控制的海域和岛礁比之前更多了，直接改变了我国南海海区的安全架构。
　　如果说过去我们对南海是鞭长莫及，就是越南都敢对我国在南海的岛礁如此放肆。那么现在，可以说解放军在南海地区已无敌手。
　　点击图片进入下―页
　　一旦南海爆发战役级规模冲突，我海空力量可在第一时间在南海上空投入高达200架作战飞机进行制空作战，海军可以投入的作战兵力已超越美国在西太平洋地区部署的第七舰队。
　　同时南海是我们的家门口，在家门口打仗我们谁也不怕。解放军拥有包括天基、陆基、海基于一体的南海侦察体系，牢牢地掌握着战场制信息权。如此兵力至少可以对抗高达三个世界最顶级的航空母舰战斗群。
　　美国深知南海地区的力量天平已经倒向中国，但是南海地缘优势太过于重要，又不甘心将这一世界的十字路口拱手让中国控制。美国重返亚太的实质是遏制中国崛起的进程，而中国崛起对外通道就是南海。
　　美军入侵南海咋办?王伟烈士告诉你
　　对于中国来说，东海主要是面对第一岛链的安全需求，而南海则是具有发展利益与安全利益相互交织的双重性。战略价值之大直接决定了中国的国运，所以我们是志在必得的，在最强调和平发展以及军力还比较薄弱的21世纪初期，面对南海我们也不会有丝毫的退让，王伟烈士用行动诠释了我们的决心与意志。
　　此次美国军机飞跃的黄岩岛附近空域距离日中美南海撞机地点并没有很远，人还是那些人，但是中美间的实力对比已经大大不一样了。那时的中国还是一把没有开光的宝剑，而现在的中国则是一把削铁如泥的利剑。
　　点击图片进入下―页
　　想让中国吞下苦果，美国人未免想得也太过理想。
　　军机飞跃无价值 战时只配当靶子
　　点击图片进入下―页
　　美军A-10攻击机
　　此次美军出动的是空军的A-10攻击机，这是一款前线支援战机能对我国南海岛礁有一定的威胁。
　　但是在面对解放军在南海部署的歼11战斗机和红旗9远程区域防空导弹没有丝毫的抵抗能力。
　　舆论战美国逞口舌 真相曝光奥巴马丢人
　　美国军机飞越事件刚一出，美国媒体就开始迫不及待地躁动起来，以为美军终于给他们长脸了!于是《美国军机飞跃黄岩岛上空》的标题就这么出来了。
　　然而……却被中国外交部打脸了……
　　重要的事情说三遍：附近、附近、附近
　　点击图片进入下―页
　　外交部发言人华春莹主持例行记者会
　　美国人有贼心没贼胆，然而即使是附近也不行，犯我华夏威仪岂能如此轻易就过关?就在美国军机飞跃黄岩岛附近空域后，中国立即在南海进行了潜射洲际导弹的发射活动。这不是一次简单的秀肌肉，而是一次划时代意义的测试。
　　点击图片进入下―页
　　巨浪2型潜射弹道导弹
　　首先从南海向内陆发射的据信是一款潜射洲际导弹，那就必然是巨浪2型潜射弹道导弹;与此同时我们还进行了一次高超音速武器的飞行测试，这是一款由液体燃料火箭助推发射入轨的高超音速弹头，可以自主规划高超音速弹道。
　　中国高超音速飞行器可作为战略导弹的战斗部使用，飞行器利用的是我国着名航天大师钱学森同志创造的“钱学森弹道”研制而成。该飞行器可在大气层边缘进行弹跳飞行，规划出无法预测的弹道，该飞行器未来作为核战斗部与东风41洲际导弹结合，这将创造一个弹道导弹的历史!
　　美国的导弹防御系统从此彻底成为一堆废铜烂铁。
　　中国将在距菲230公里处设前哨站
　　香港媒体消息，中国将从今年晚些时候起在南海的黄岩岛展开填海工程。这包括加建一条跑道，加大中国空军在争议海域的活动范围。中国还将很快在距离菲律宾海岸230公里的地区设立前哨站。
　　中国外交部在周一被问及该报道时并没有否认其真实性。外交部新闻发言人华春莹表示，她注意到了该消息，并重申“中方将采取必要手段坚决维护中国的主权和正当权益”。
　　点击图片进入下―篇
　　中国海警正在巡逻
　　就在2012年，中国和菲律宾两国的船只曾在黄岩岛一带展开对峙，但中国海警局的船只很快就控制了该区域。
　　国防部回应：将采取一切必要措施
　　据报道，6架美国空军战机19日在黄岩岛附近的“国际空域”执行了飞行任务。中方对此有何评论?
　　点击图片进入下―篇
　　黄岩岛地理位置图
　　我们注意到有关报道。需要指出的是，美方以“航行和飞越自由”为名，行推动南海军事化之实，威胁沿海国的主权和安全，破坏地区和平稳定，我们对此表示关切和反对。
　　黄岩岛是中国的固有领土。中国军队将采取一切必要措施，维护国家主权和安全。
欢迎举报抄袭、转载、暴力色情及含有欺诈和虚假信息的不良文章。
请先登录再操作
请先登录再操作
微信扫一扫分享至朋友圈
搜狐公众平台官方账号
生活时尚&搭配博主 /生活时尚自媒体 /时尚类书籍作者
搜狐网教育频道官方账号
全球最大华文占星网站-专业研究星座命理及测算服务机构
军事头条网是中国最权威的军事新闻和军事评论网站之一，为您精...
3320文章数
主演：黄晓明/陈乔恩/乔任梁/谢君豪/吕佳容/戚迹
主演：陈晓/陈妍希/张馨予/杨明娜/毛晓彤/孙耀琦
主演：陈键锋/李依晓/张迪/郑亦桐/张明明/何彦霓
主演：尚格?云顿/乔?弗拉尼甘/Bianca Bree
主演：艾斯?库珀/ 查宁?塔图姆/ 乔纳?希尔
baby14岁写真曝光
李冰冰向成龙撒娇争宠
李湘遭闺蜜曝光旧爱
美女模特教老板走秀
曝搬砖男神奇葩择偶观
柳岩被迫成赚钱工具
大屁小P虐心恋
匆匆那年大结局
乔杉遭粉丝骚扰
男闺蜜的尴尬初夜
客服热线：86-10-
客服邮箱：英国脱欧胜算几何?英国为什么要脱欧?现在欧盟还有哪些国家?
英国脱欧胜算几何?英国为什么要脱欧?现在欧盟还有哪些国家?
&日&&& 周公网讯
　　自从欧盟成立以来，一直为了促进世界的经济发展与和平作出了贡献，在国际占据着重要的地位。英国作为初始成员国之一，要求退出欧盟，此言一出，国际风云再起波澜。英国为什么要脱欧?欧盟是何时成立的?他的成员国还有哪些?
　　英国脱欧胜算几何?英国为什么要脱欧?
　　英国首相卡梅伦25日在白金汉郡会见欧盟委员会主席容克，讨论欧盟改革和英欧关系问题。卡梅伦此前表示，应在2017年年底前就是否退出欧盟举行全民公投。英国朝野共推“公投”，使得本不平坦的英欧关系再起波澜。英国脱欧，胜算几何？
　　卡梅伦在与容克的会谈中表示，英国人对英国在欧盟的现状感到“不高兴”，认为欧盟需要进行改革以更好地化解英国人的担忧。于本月获得连任的卡梅伦此前曾承诺，由保守党领导的新一届政府将在2017年年底之前举行全民公投，以决定英国是否退出欧盟。新政府定于本月27日新一届议会开幕时公布最新施政与立法计划。针对欧洲问题的公投法案将成为立法计划中的优先事项。英国两个传统大党在举行公投一事上已取得一致，这将降加快公投决策进程。
　　英国与欧洲大陆的关系向来充满波折。近年来，随着欧洲政治经济一体化加快，英国社会中的疑欧、脱欧情绪更加明显。政治方面，英国不满欧盟立法机关享有高于成员国议会的立法权，英国议会无法阻止一些不受欢迎的欧盟法规在英国实施。经济层面，英国要求欧盟“简政放权”，减少在经贸领域的官僚主义和“过度干预”。移民方面，英国要求采取控制措施，阻止欧盟新成员国的移民“大举涌入”。
　　从目前各方表态看，欧盟高层官员和主要成员国普遍希望英国留下，担心欧盟的统一架构被英国“例外主义”所侵蚀，进而引发示范效应。
　　现在欧盟还有哪些国家?
　　欧洲联盟(英语：European U法语：Union europé德语：Europ?ische Union)，简称欧盟(EU)，总部设在比利时首都布鲁塞尔(Brussel)，是由欧洲共同体发展而来的，创始成员国有6个，分别为法国、德国、意大利、荷兰、比利时和卢森堡。该联盟现拥有28个会员国，正式官方语言有24种。
　　1991年12月，欧洲共同体马斯特里赫特首脑会议通过《欧洲联盟条约》，通称《马斯特里赫特条约》(简称《马约》)。日，《马约》正式生效，欧盟正式诞生。2012年，欧盟获得诺贝尔和平奖。
　　欧洲理事会主席为图斯克，欧洲议会议长为马丁·舒尔茨。卢森堡前首相容克为欧盟委员会轮值主席 。
　　欧洲联盟的条约经过多次修订，截止2014年欧洲联盟的运作方式是依照《里斯本条约》。政治上所有成员国均为民主国家(2008年《经济学人》民主状态调查)，经济上为世界上第一大经济实体(其中德国、法国、意大利、英国为八大工业国成员)，军事上绝大多数欧洲联盟成员国为北大西洋公约组织成员。
发表评论：
TA的最新馆藏