UU文学 通过搜索各大小说站为您自动抓取各类小说的最快更新供您阅读!

“当然可以,你拿去看吧,有什么意见尽管跟我说。” 李卫脸上挂着温和的笑容,语气客气地说道。

秦奕接过论文,迫不及待地开始快速浏览其中的关键论述——这篇论文主要阐述了并行程序中并行、汇聚、通讯、映射及归纳等机制的语义。

看着看着,他的眼中闪过一丝惊喜,这里面描述的不正是前世互联网大数据处理框架 mApREdUcE 里的基本操作吗!

前世,搜索引擎巨头谷歌在 2004 年前后发布了三篇奠定大数据处理基础的论文 ——《the Google File System》《mapReduce: Simplified data processing on Large clusters》《bigtable: A distributed Storage System for Structured data》。

这三篇论文为大数据处理领域带来了全新的思路和方法,宛如一把火,瞬间点燃了学术界和工业界对大规模数据处理技术的研究热情,也有力推动了 hadoop 等开源项目的发展。

这些项目在之后的十几年里迅速成为了大数据基础设施,对整个大数据、云计算甚至是后来的人工智能行业都产生了深远影响。

其中,《mapReduce》这篇论文里使用的核心操作 map 和 Reduce,与李卫这篇论文中的映射和归纳两个机制,本质上如出一辙。

秦奕不禁思索,原来早在这个时候,相关的核心操作就已经在并行程序领域得到应用了吗?

或许当时撰写那三篇论文的谷歌程序员正是从这些并行程序的论文中获得了灵感。

当然,《mapReduce》论文不只是应用了这两个关键操作,它还围绕这两个核心操作,精心设计了一套完整的系统架构和实现机制,涵盖数据划分、任务调度、容错处理、数据 \/ 代码互定位等功能,确保在大规模集群上能够稳定、高效地运行。

秦奕接着又仔细看了看李卫论文里的具体实验内容,是关于 Ada 语言在一些单机程序中的处理。

“李卫同志,我有个疑惑。” 他抬起头,目光看向李卫。

“说吧。” 李卫挑了挑眉,他刚才让对方提意见不过是句客气话,没想到这个秦奕还真敢有想法。

“你这里的并行程序,似乎只涉及单台计算机的多处理器并行,没有涉及多台计算机的并行处理。” 秦奕认真地说道。

“多台计算机的并行处理?” 李卫低声重复着这个词,随后笑道,“这需要用到计算机网络了,是吧?”

秦奕连忙点头,回答道:“对的。”

“我理解单台计算机虽然具备低延迟通信、易于管理和调度以及数据一致性维护简单等优势,但是它的处理器数量和内存容量等硬件资源有限。”

“一旦并行任务规模持续扩大,很快就会遭遇资源瓶颈,难以满足大规模计算需求。如果想要进一步提升其性能,往往需要采用高端的多核处理器、大容量高速内存等硬件设备,硬件成本高昂,且能耗也相对较高。”

“如果借助计算机网络来实现程序的并行,那就可以通过增加计算机的数量,轻松扩展计算能力,理论上能够满足任意大规模的计算需求。”

李卫听后,笑着反驳:“你可别把计算机网络说得太神了。计算机网络通信开销还是很大的,和单机通信比起来,延迟成百上千倍,对于一些对通信实时性要求极高的任务,这可是无法接受的。”

秦奕自然不会轻易放弃,他耐心解释道:“您说得很有道理,这确实不适用于对实时性要求高的任务。”

“但我觉得,在大多数情况下,程序对实时性的要求并没有那么严苛。而且,随着赵老那边对光纤传输介质的研究不断深入,网络的延迟会越来越低,网络并行的适用性也会越来越广。”

“很有想法啊!” 李卫赞许地说道,“你现在是研究生还是本科生?有没有兴趣来我们京航大学继续进修?来我这里读博士,我可以专门为你开设你说的这个研究课题。”

“啊,不了不了。” 秦奕连忙摆手,“我只是提出一些粗浅的想法,我觉得自己还是更适合在产业界继续深耕发展。”

“哈哈哈,你就是想光靠动动嘴搞科研,是吧。” 李卫半开玩笑地说道,“科研可不是有一个想法就可以的,还需要有大量的实验佐证的。”

“那倒不是。我真心觉得,随着计算机网络的逐渐流行,我们很快就会面临需要处理海量数据的情况。到时候,如果科研界能提供一些指导,我们产业发展也能走得更顺畅,说不定还能在海量数据这上面走在前头。” 秦奕认真地解释道。

不过他心里也清楚,现在距离处理海量数据还有很长的路要走。

前世从 1994 年万维网联通世界,到 2004 年大数据概念的提出,中间还历经了十年的发展,而如今,万维网的雏形都还未出现。

“那我就期待一下你说的计算机网络的流行了!” 李卫笑着说,“到时候,要是你这个产业界人士真遇到海量数据处理的问题,也可以来找我们合作,哈哈。”

秦奕又和李卫闲聊了几句关于全球即将通过计算机网络互联的话题,便离开了标准化协会,前往海淀区找董德绍他们。

“啊!为什么这个程序运行结果是 4!”

秦奕刚一进门,就听到了董德绍绝望的哀嚎。

李勇军满脸困惑地看着他:“我刚才就给你解释过这个程序的整体运行逻辑了,至于你为什么就是弄不明白,我也实在搞不懂。”

周瑾龙在一旁劝道:“小董,你就别挣扎了,数学学霸的世界你不懂,编程这种东西,我这种上过大学的都放弃了,更何况你这种大学都没考上的。”

UU文学推荐阅读:被人拉入相亲群,我无敌你们随意记忆审判:那一刻,全国为他痛哭港片:我还没出位,老大先出殡了皓月和正义重生18:从借钱炒期货开始暴富我的26岁总裁妻子收手吧系统!别再逼我做渣男小巷人家:守护庄家?开局成孤儿暗黑江湖总要爱上一个人,为什么不能是我四合院:从1958开始全球性闹鬼事件穿越到未来,我有最强升级系统年下!开局相亲姐姐闺蜜带着空间穿八零,领着家人奔小康四合院:从卫生员开始的快乐人生民间高手,从街头卖艺开始让我住在你的心里终极一班:我魅魔被美女们包围了世界大杂烩,主角大乱斗你都建国了,你说你是雇佣兵?是你要分手的,我走了你又哭啥?商海激情:触底反弹之超越剑御九霄:昆仑秘境传重生之打造属于我商业帝国三年出狱妻子出轨?一无所有的他原来手眼通天!被青梅竹马拒绝后被神明赐下权柄驭手撸铁三百万次,我成了女儿的英灵一首青花瓷,我,掀起了国风狂潮东星乌鸦兑变,注重武力和谋略!吃校花软饭的我,创建护庭十三队灵气复苏,从虚拟现实开始全民:开局觉醒无限虫巢!开局继承九重雷刀,我横推万族我把校花渣了,她还觉得我深情天灭真元重生在新婚夜,入赘当谭家姑爷妃礼勿视,王爷你也重生了特级保安山村尤物俏美妇都穿越了,谁还上班啊转职召唤师,开局十连SSS天赋四合院:傻柱偷偷结婚,众禽傻眼重生2003:互联网到科技大亨梦回小山村神豪的学霸生涯诸神来犯,我在现代重演神话医妃逆天:废柴大小姐都练纯阳功了,你给我婚书?
UU文学搜藏榜:重生之从做个好爸爸开始人在斗罗,开局被比比东活埋皇后成长手札不随心所欲能叫重生吗?掌欢完美战兵四合院:这个保卫员坏,痞,帅!梦游妈咪:谁是我爹地千树万树情话开疯狂从2000开始叫我女王(GL)赘婿之杀神回归县城青年之入世萌妻羞羞:BOSS,慢点撩!松小姐今天喝酒了吗千金大佬她slay全场小乞丐掀翻三界高武:刀镇星空故事无限我真不想当女主角都市霸道医仙人间凶狗直播:穿书炮灰反成人生赢家皇上今天掉马了吗重生七零我靠种田暴富了叶君临李子染全文免费阅读笔趣阁退婚后我嫁给了渣男他叔头条婚约都市崛起之开启万界交易序列为零东京泡沫后的文娱时代逍遥渔场妖孽男神在花都最废女婿战神她在娱乐圈杀疯了胭尘团宠寨主种田忙开局我被系统一直坑地府微信群军少,有点喜欢你娱乐之中年危机错婚试爱病娇惹不起重生2014:一个人的豪门想支持乡村教育,却成为商业大佬逍遥明星娶夫不易[穿书]重回1981从退婚开始不凡兵王我的篮球生涯养废青梅的我,只好负起责
UU文学最新小说:重生不当老实人,我把妻女宠上天舔狗反派怎么成了虐文的救世主签到变异军团,我在末世横推无敌超超超超级兵王回归逍遥桃园小山神高武:刷影子掉宝,从天才JK妹妹开始港片:卧底财阀,大嫂套路深四合院:重生何雨柱,我坑死禽兽重生1984:我靠赶海打渔成首富赌石,我的龙瞳能鉴定一切!刚失恋,我性转体咋成清冷校花了都市修仙:我以一剑证长生我就开个超市,省里怎么来人了重生90年代,从混混到商界狂龙华娱:从吐槽开始山野小神医,快活又无敌拥有陆海空三军你叫他们土八路永夜白皮书回村:别人糠咽菜,我赶山猎虎养全家!穿越,从混乱进化开始高武:这个男人太会蹭了灵界之海中孤岛破界之芒四合院生活里的仇与情我就打个牌,怎么就成神了?重回1979,上门赘婿我不当了!分手后,意外开启了透视人生穿越成学渣的逆袭之旅重生1960:八尺巷爆到洪家沟四合院:何雨柱,被俏寡妇捡回家回到零五当神医:我把娇妻宠上天权势巅峰:分手后,我青云直上谁也没告诉我见义勇为送老婆啊每天卖牛杂,我成了极道武尊从一战开始准备抗战杀敌爆奖励,开局瞬秒敌方大将开局桃花剑灵,凡级天赋一路平推武道通神:从天道酬勤开始港片:那一晚,大嫂的头发乱了妖女托梦,校花竟然暗恋我地球第一猛男狂枭:地府无渡龙神归来,被七个未婚妻全球通缉!70年代:一元秒杀开始完美人生凡心入局帅气又多金,看我纵横都市花海离婚后开始的新生活和民国道姑恋爱后,全网嗑疯了!这个古董会说话跨界传说