1497人阅读
IT Security Knowledge（10）
author:skate
仅仅在五年之前，诸如美国国家安全局（National Security Agency，NSA）这样的政府机构要想通过关键词的方式高效率地分析数百万份电话、文本消息和在线聊天记录，简直是不可能完成的任务。但是一系列新技术的应用让NSA拥有相对充分的人力和财力做到这一点。
哈佛商学院客座教授、数据分析专家汤姆?达文波特（Tom Davenport）指出：“这些新技术为政府部门节省了巨额开支，同时还极大地提高了政府部门分析此类数据的能力。虽然需要配套的数据中心支持才能完成数据分析任务，但这些技术的成本要远比几年前低得多。”
NSA斥资十二亿美元在犹他州打造大型数据中心将于今年秋季投入使用。目前尚不明确的是，到底NSA在覆盖全美的数据中心使用的是何种计算技术。但总体来说，这些技术被分为三大类型：
数据库系统
大多数使用SQL编程语言的传统数据库是把数据存储在由行与列组成的表格中。然而，当遇到存储包括电子邮件或文本信息等字符串时，传统数据库就暴露了能力有限的弊端。而且它们还无法处理图片或视频。
而于2009年年底开始出现的新型数据库NoSQL（Not Only SQL，不仅仅是SQL）则突破了传统数据库的能力限制，可以允许数据分析专家针对所有类型的数据创建信息要求。这些新型数据库包括MongoDB、Cassandra和Simple DB等。
在帮助公司分析超大型数据组方面，NoSQL数据库体现出了非凡的能力。比如，美国保险数据供应商Verisk Analytics Inc.的分析师就在针对数十亿客户资料不断运行各种不同的数据模式和分析方法，以从中发现虚假保险索赔记录。Verisk 副总裁兼首席信息官佩里?罗泰拉（Perry Rotella）表示，使用IBM提供的传统DB2数据库“需要通宵达旦地工作6个小时才能完成工作”。此后，分析师还得投入大量时间研究得出的数据结
果，并提出新的信息要求，而这恐怕还得再熬一个晚上。他指出，分析师每次都需要花费几周时间才能创建出新的数据模型。Verisk最近刚刚开始使用更换后的NoSQL数据库，分析师仅用30秒就能完成相同类型要求的运行。
罗泰拉表示：“突然之间，你的模型建构告别了几天才更行一次的传统，变成了实时更新状态。通过使用NoSQL数据库，你可以在一天内多次进行数据运行，这极大地缩短了获得数据结果的时间。这项功能简直太强大了。”
传统分析要求分析师对数据有充分的了解，然后才能创建假设问题，进而针对数据库提出复杂的问题。以机器学习和自然语言处理为核心的编程技术则依靠计算机程序来发现数据类型，甚至还可以根据上下文阐明模糊词汇的意义。
达文波特指出：“你可以把机器学习程序植入多个数据之中，然后你就会看到该程序会给你提供什么样的分析结果。通过使用自然语言处理技术，你还可以分辨出‘炸弹’这个词是百老汇舞台剧的剧名，还是恐怖分子将会使用的武器。”
权威市场研究机构Gartner Inc.的分析师道格拉斯?莱尼（Douglas Laney）指出，机器学习又被称之为“认知分析”，它能够让分析师提出的问题不断进行“自我修正”。比如，在新信息出现时，零售商就可以使用该技术来实 时自动更新计价算法。这些新信息包括天气、时间、甚至是消费者在其零售店里的行为视频。
Hadoop基础架构
直到最近，还是只有造价昂贵的硬件设备才能够运行特别复杂的计算机程序，比如超大型计算机设备。现在Hadoop开源软件分布式系统基础架构已经能够让从资料库提取信息的过程进行分布实施。在这一过程中，不同的分析任务被分配给大量造价低廉的服务器进行分析，每个服务器只负责分析其中的一部分内容，然后这些内容又会在任务结束后被汇总在一起。达文波特表示：“这非常省钱，而且运行速度特别快。”
这种将复杂的问题分配给大量造价低廉的计算机处理的能力有助于人们获得问题的及时反馈，而且人们还会获得大量的数据变量。比如，美国汽车信息网站可以帮助汽车经销商预测一辆车在他们自己的停车场里停留的平均时间。这种预测能够最大限度地缩短一辆车售出的时长。的首席信息官菲利普o波特洛夫（Philip Potloff）指出：“对于汽车经销商来说，这可是衡量销售业绩最为重要的指标之一。”
参考知识库
* 以上用户言论只代表其个人观点，不代表CSDN网站的观点或立场
访问：2550391次
积分：25849
积分：25849
排名：第153名
原创：528篇
转载：49篇
评论：229条
每天进步一点一点
MySQL,Oracle,Data Architect
email/msn:
weibo :/skatexg
(3)(2)(4)(2)(7)(1)(2)(3)(1)(4)(2)(1)(2)(1)(2)(6)(4)(5)(9)(5)(1)(9)(4)(4)(13)(9)(5)(6)(8)(22)(1)(6)(1)(6)(5)(7)(5)(1)(6)(7)(1)(7)(10)(5)(12)(10)(2)(10)(23)(8)(23)(4)(1)(11)(10)(9)(10)(11)(5)(3)(11)(23)(11)(7)(1)(3)(5)(1)(2)(12)(9)(17)(5)(15)(16)(7)(6)(7)(19)(3)(3)(2)(1)(2)(6)(4)(2)(6)(4)美国国安局拦截数据90%属于普通网民
美国《华盛顿邮报》5日披露，美国国家安全局拦截的电子通信数据来源中，包括美国人在内普通网民数量远远多于被列为合法监控对象的外籍人士。这家报纸的结论依据对国家安全局前雇员爱德华·斯诺登提供的电子数据进行4个月研究后得出。斯诺登提供了一个巨大缓冲存储器，里面存有国安局拦截的大量电子数据。按照这家报纸的说法，数据中包含大约16万则电子邮件和实时通信信息以及从超过1.1万个网络账户中获取的7900份文件，拦截时间为美国总统贝拉克·奥巴马的第一个任期内，即2009年至2012年。这家报纸得出结论，这些数据中的电子账户持有者十分之九为“非预定监控对象，但还是被国安局所网获”。这些人多为普通网民，美国国内国外都有。监控到的文件中近半数“包含国家安全局标注为属于美国公民或居民的姓名、电子邮件地址及其他细节”。这家报纸还发现，国安局把持一些被分析师称为“没用的”文件，内容包括谈情说爱故事、财务焦虑、非法性伙伴等。不过，也有一些文件内出现“有情报价值”的内容，比如“一个表面盟友的两面做法、一个不友好政权发生军事灾难”等。《华盛顿邮报》上星期说，除了英国、加拿大、澳大利亚和新西兰，其他国家和地区都是国家安全局的事实监控对象。德国议会正在调查国家安全局及其合作者对德国公民和政客的监听活动，以及德国情报机构是否协助了监听。庄北宁（新华社供本报特稿）
正文已结束，您可以按alt+4进行评论
相关阅读：
相关搜索：
看过本文的人还看了
[责任编辑：zhenfeichen]
热门搜索：
Copyright & 1998 - 2016 Tencent. All Rights Reserved国安局一朋友,身份证号码是对的,但照片对不上,是不是信息做了修改_百度知道
国安局一朋友,身份证号码是对的,但照片对不上,是不是信息做了修改
您的回答被采纳后将获得：
系统奖励20（财富值+经验值）+难题奖励30（财富值+经验值）
我有更好的答案
其他类似问题
为您推荐：
身份证号码的相关知识
等待您来回答
下载知道APP
随时随地咨询
出门在外也不愁美国国安局曾监控数位中国前任国家领导人
[摘要]美国一直以中国间谍和黑客受害者自居。而实际上，美国自己才是窃听者。
来源：东方宽频
【环球时报驻美国、德国特派特约记者陈一鸣青木】“美国国家安全局曾入侵中国科技公司华为总部的服务器”，美国《纽约时报》和德国《明镜》周刊22日同时刊发美国前情报人员斯诺登的最新爆料。《明镜》周刊称，美国的监控目标还包括数位中国前任国家领导人和多个政府部门及银行。斯诺登此前的爆料称，德国总理默克尔的个人通信也在美国的监控之下。华为公司23日发给《环球时报》的声明称：如果《纽约时报》的报道属实，我们对于此类入侵、渗透到我们的内部网络并监控通信的行为表示强烈谴责。尽管当今数字时代的现状就是公司的网络不断遭到来自不同源头的监控和攻击。但我们再次重申，华为反对一切危害网络安全的行为，并愿意以最为开放透明的态度与各国政府、行业、用户一起合作，共同应对全球网络安全挑战。在“棱镜门”事件去年曝光之前，美国长期指责中国针对美国发动黑客攻击，并声称许多黑客具有军方背景。美国一些政客以华为公司与中国军方“关系不清”为由，开始怀疑该公司可能在产品中暗藏“后门”。但据《纽约时报》称，斯诺登曝光的一份NSA2010年的文件显示，在国安局一个代号为“攻击巨人”的行动中，华为反而是美国间谍行动的目标之一。这一行动起始于2007年，最初目标在于寻找华为与中国军方存在关系的证据。大约3年后，隶属于国安局的“获得特定情报行动办公室”终于发现了一种侵入华为公司总部服务器的办法，并窃取了华为创始人的通信记录等信息。这份最新曝光的文件并未提及国安局是否如愿搜集到了华为与军方存在关系的证据，但美国众议院情报委员会2012年发表的一份报告承认，没有证据表明华为等中国公司存在官方背景。据《纽约时报》报道，NSA针对华为的间谍行为并未止于“搜证”，入侵该公司的服务器后，NSA开始据此进行进一步监控。伊朗、阿富汗、巴基斯坦、肯尼亚和古巴等不愿购买美国设备的国家大量采用了华为的技术设备，NSA“发觉可以通过侵入华为设备来监控这些国家的目标”，“文件显示，只要获得美国总统的许可，国安局还可针对这些目标发动网络攻击”。《明镜》周刊引述NSA一份内部文件说，“我们取得了太多数据和资料，多到不知道该怎么办。”“中美‘电子冷战’加速”，美国《时代》周刊23日评论称，网络安全一直是中美关系的症结之一，一般是美国怀疑中国政府及其黑客入侵美国政府及企业的网络，但最新的爆料提供了另外的视角。《华盛顿邮报》23日引述华为美国业务高管普卢默的话称，华为并不知道自己是NSA的目标，“讽刺的是，美国指控中国针对美国的所作所为，实际上恰恰是美国针对我们的做法”。他还表示，如果NSA真对华为开展了间谍行动，正好可以借此明白华为与中国政府没有关系，而是一家独立企业。“华盛顿正在失去其道德”，德国《焦点》周刊23日引述外交政策专家的评论称，“多年来美国一直以‘中国间谍和黑客攻击’为由向中国施压。而实际上，美国自己才是窃听者”。德国新闻电视台称，美国几乎在全方位监听“整个中国”，“说到底，这是因为美国害怕中国超越自己成为世界超级大国”。
[责任编辑：samxiao]
您认为这篇文章与"新一网（08008.HK）"相关度高吗？
Copyright & 1998 - 2016 Tencent. All Rights Reserved
还能输入140字