博客專欄

EEPW首頁 > 博客 > 年終重磅盤點(diǎn):2022計算機(jī)科學(xué)6大突破!破解量子加密、最快矩陣乘法等榜上有名

年終重磅盤點(diǎn):2022計算機(jī)科學(xué)6大突破!破解量子加密、最快矩陣乘法等榜上有名

發(fā)布人:傳感器技術(shù) 時間:2023-01-03 來源:工程師 發(fā)布文章
【導(dǎo)讀】2022年,計算機(jī)領(lǐng)域發(fā)生了哪些大事?Quanta Magazine的年終盤點(diǎn)來了。


2022年,計算機(jī)領(lǐng)域發(fā)生很多劃時代的大事。在今年,計算機(jī)科學(xué)家學(xué)會了完美傳輸秘密,Transformer的進(jìn)步神速,在AI的幫助下,數(shù)十年歷史的算法被大大改進(jìn)……圖片

2022年計算機(jī)大事件

現(xiàn)在,計算機(jī)科學(xué)家能解決的問題,范圍是越來越廣了,因此,他們的工作也越來越跨學(xué)科。

今年,許多計算機(jī)科學(xué)領(lǐng)域的成果,還助力了其他科學(xué)家和數(shù)學(xué)家。比如密碼學(xué)問題,這涉及了整個互聯(lián)網(wǎng)的安全。密碼學(xué)的背后,往往是復(fù)雜的數(shù)學(xué)問題。曾經(jīng)有一種非常有前途的新密碼方案,被認(rèn)為足以抵御來自量子計算機(jī)的攻擊,然而,這個方案被「兩條橢圓曲線的乘積及其與阿貝爾曲面的關(guān)系」這個數(shù)學(xué)問題推翻了。圖片以單向函數(shù)的形式出現(xiàn)的一組不同的數(shù)學(xué)關(guān)系,將告訴密碼學(xué)家是否有真正安全的代碼。計算機(jī)科學(xué),尤其是量子計算,與物理學(xué)也有很大的重疊。今年理論計算機(jī)科學(xué)的一件大事,就是科學(xué)家證明了NLTS猜想。這個猜想告訴我們,粒子之間幽靈般的量子糾纏,并不像物理學(xué)家曾經(jīng)想象的那樣微妙。這不僅影響了對我們對物理世界的理解,也影響了糾纏所帶來的無數(shù)密碼學(xué)的可能性。圖片另外,人工智能一直與生物學(xué)相得益彰——事實上,生物學(xué)領(lǐng)域就是從人腦中汲取靈感,人腦也許是最終極的計算機(jī)。長久以來,計算機(jī)科學(xué)家和神經(jīng)科學(xué)家都希望了解大腦的工作原理,創(chuàng)造出類腦的人工智能,但這些似乎一直是白日夢。但不可思議的是,Transformer神經(jīng)網(wǎng)絡(luò)似乎可以像大腦一樣處理信息。每當(dāng)我們多了解一些Transformer的工作原理,就更了解大腦一些,反之亦然。或許這就是為什么Transformer在語言處理和圖像分類上如此出色的原因。甚至,AI還可以幫我們創(chuàng)造更好的AI,新的超網(wǎng)絡(luò)(hypernetworks)可以幫助研究人員以更低的成本、用更快的速度訓(xùn)練神經(jīng)網(wǎng)絡(luò),還能幫到其他領(lǐng)域的科學(xué)家。

Top1:量子糾纏的答案

圖片量子糾纏是一種將遙遠(yuǎn)的粒子緊密聯(lián)系起來的特性,可以肯定的是,一個完全糾纏的系統(tǒng)是無法被完全描述的。不過物理學(xué)家認(rèn)為,那些接近完全糾纏的系統(tǒng)會更容易描述。但計算機(jī)科學(xué)家則認(rèn)為,這些系統(tǒng)同樣不可能被計算出來,而這就是量子PCP(概率可檢測證明,Probabilistically Checkable Proof)猜想。為了幫助證明量子PCP理論,科學(xué)家們提出了一個更簡單的假設(shè),被稱為「非低能平凡態(tài)」(NLTS)猜想。今年6月,來自哈佛大學(xué)、倫敦大學(xué)學(xué)院和加州大學(xué)伯克利分校對三位計算機(jī)科學(xué)家,在一篇論文中首次實現(xiàn)了NLTS猜想的證明。

圖片

論文地址:https://arxiv.org/abs/2206.13228這意味著存在可在更高的溫度下保持糾纏態(tài)的量子系統(tǒng),同時也表明,即使遠(yuǎn)離低溫等極端情況,糾纏粒子系統(tǒng)仍然難以分析,難以計算基態(tài)能量。物理學(xué)家們很驚訝,因為這意味著糾纏不一定像他們想象的那樣脆弱,而計算機(jī)科學(xué)家們很高興離證明一個被稱為量子PCP(概率可檢測證明)定理的證明又近了一步。圖片今年10月,研究人員成功地將三個粒子在相當(dāng)遠(yuǎn)的距離上糾纏在一起,加強(qiáng)了量子加密的可能性。

Top2:改變AI的理解方式

圖片在過去的五年里,Transformer徹底改變了AI處理信息的方式。在2017年,Transformer首次出現(xiàn)在一篇論文中。人們開發(fā)Transformer,是為了理解和生成語言。它可以實時處理輸入數(shù)據(jù)中的每一個元素,讓它們具有「大局觀」。與其他采取零散方法的語言網(wǎng)絡(luò)相比,這種「大局觀」讓Transformer的速度和準(zhǔn)確性大大提高。圖片這也使得它具有不可思議的通用性,其他的AI的研究人員,也把Transformer應(yīng)用于自己的領(lǐng)域。他們已經(jīng)發(fā)現(xiàn),應(yīng)用同樣的原理,可以用來升級圖像分類和同時處理多種數(shù)據(jù)的工具。

圖片

論文地址:https://arxiv.org/abs/2010.11929Transformers迅速成為專注于分析和預(yù)測文本的單詞識別等應(yīng)用程序的領(lǐng)跑者。它引發(fā)了一波工具浪潮,例如 OpenAI的GPT-3,它訓(xùn)練數(shù)千億個單詞并生成一致的新文本,達(dá)到令人不安的程度。不過,跟非Transformer模型相比,這些好處是以Transformer更多的訓(xùn)練量為代價的。

圖片

這些人臉是由基于Transformer的網(wǎng)絡(luò),在對超過20萬張名人面孔的數(shù)據(jù)集進(jìn)行訓(xùn)練后創(chuàng)建的在今年3月,研究Transformer工作原理的研究人員發(fā)現(xiàn),它之所以如此強(qiáng)大,部分原因是它將更大的意義附加到詞語上的能力,而不是簡單的記憶模式。圖片事實上,Transformer的適應(yīng)性如此之強(qiáng),神經(jīng)科學(xué)家已經(jīng)開始用基于Transformer的網(wǎng)絡(luò)對人腦功能進(jìn)行建模。這表明人工智能和人類智能之間,或許是一體同源的。圖片

Top3:破解后量子加密算法

圖片量子計算的出現(xiàn),讓很多原本需要消耗超大計算量的問題都得到了解決,而經(jīng)典加密算法的安全性也因此受到了威脅。于是,學(xué)界便提出了后量子密碼的概念,來抵抗量子計算機(jī)的破解。作為備受期待的加密算法,SIKE(Supersingular Isogeny Key Encapsulation)是一種利用橢圓曲線作為定理的加密算法。然而就在今年7月,兩位來自比利時魯汶大學(xué)的研究人員發(fā)現(xiàn),這個算法可以在短短1個小時內(nèi),用一臺10年「高齡」的臺式計算機(jī)被成功破解。值得注意的是,研究人員從純數(shù)學(xué)的角度來解決這個問題,攻擊算法設(shè)計的核心,而不是任何潛在的代碼漏洞。

圖片

論文地址:https://eprint.iacr.org/2022/975對此,研究人員表示,只有當(dāng)你能證明「單向函數(shù)」的存在時,才有可能創(chuàng)建一個可證明的安全代碼,也就是一個永遠(yuǎn)不可能失敗的代碼。雖然現(xiàn)在仍然不知道它們是否存在,但研究人員認(rèn)為,這個問題等同于另一個叫做Kolmogorov復(fù)雜性的問題。只有當(dāng)某一版本的Kolmogorov復(fù)雜性難以計算時,單向函數(shù)和真正的密碼學(xué)才有可能。

Top4:用AI訓(xùn)練AI

圖片

近年來,人工神經(jīng)網(wǎng)絡(luò)的模式識別技能,為人工智能領(lǐng)域注入了活力。但在一個網(wǎng)絡(luò)開始工作之前,研究人員必須首先訓(xùn)練它。這個訓(xùn)練過程可能會持續(xù)數(shù)月,需要大量數(shù)據(jù),在這個過程中,需要對潛在的數(shù)十億個參數(shù)進(jìn)行微調(diào)。現(xiàn)在,研究人員有了一個新的想法——讓機(jī)器替他們來做這件事。這種新型「超網(wǎng)絡(luò)」叫做GHN-2,它能夠處理和吐出其他網(wǎng)絡(luò)。

圖片

論文鏈接:https://arxiv.org/abs/2110.13100它的速度很快,能夠分析任何指定的網(wǎng)絡(luò),并迅速提供一組參數(shù)值,這些參數(shù)值和以傳統(tǒng)方式訓(xùn)練的網(wǎng)絡(luò)中的參數(shù),一樣有效。盡管GHN-2提供的參數(shù)可能不是最佳的,但它仍然提供了一個更理想的起點(diǎn),減少了全面訓(xùn)練所需的時間和數(shù)據(jù)。圖片通過在給定的圖像數(shù)據(jù)集和我們的DEEPNETS-1M架構(gòu)數(shù)據(jù)集上預(yù)測的參數(shù)進(jìn)行反向傳播訓(xùn)練今年夏天,Quanta雜志還研究了另一種幫助機(jī)器學(xué)習(xí)的新方法——具身人工智能。圖片它允許算法從響應(yīng)迅速的三維環(huán)境中學(xué)習(xí),而不是通過靜態(tài)圖像或抽象數(shù)據(jù)。無論是探索模擬世界的代理,還是真實世界中的機(jī)器人,這些系統(tǒng)擁有從根本上不同的學(xué)習(xí)方式,而且在許多情況下,這些方式比使用傳統(tǒng)方法訓(xùn)練的系統(tǒng)更好。

Top5:算法的改進(jìn)

提高基礎(chǔ)計算算法的效率一直都是學(xué)界熱點(diǎn),因為它會影響大量計算的整體速度,從而對智能計算領(lǐng)域產(chǎn)生多米諾骨牌式的效應(yīng)。今年10月,DeepMind團(tuán)隊在發(fā)表于Nature上的論文中,提出了第一個用于為矩陣乘法等基本計算任務(wù)發(fā)現(xiàn)新穎、高效、正確算法的AI系統(tǒng)——AlphaTensor。它的出現(xiàn),為一個50年來的懸而未決的數(shù)學(xué)問題找到了新答案:找到兩個矩陣相乘的最快方法。矩陣乘法,作為矩陣變換的基礎(chǔ)運(yùn)算之一,是是許多計算任務(wù)的核心組成部分。其中涵蓋了計算機(jī)圖形、數(shù)字通信、神經(jīng)網(wǎng)絡(luò)訓(xùn)練和科學(xué)計算等等,而AlphaTensor發(fā)現(xiàn)的算法可以使這些領(lǐng)域的計算效率大大提升。

圖片

論文地址:https://www.nature.com/articles/s41586-022-05172-4今年3月,由六位計算機(jī)科學(xué)家組成的團(tuán)隊提出了一種「快得離譜」的算法,讓計算機(jī)最古老的「最大流問題」獲得了突破性的進(jìn)展。新算法可在「幾乎線性」的時間內(nèi)解決這個問題,也就是說,其運(yùn)行時間基本與記錄網(wǎng)絡(luò)細(xì)節(jié)所需的時間正比。

圖片

論文地址:https://arxiv.org/abs/2203.00671v2最大流問題是一種組合最優(yōu)化問題,討論的是如何充分利用裝置的能力使得運(yùn)輸?shù)牧髁孔畲?,進(jìn)而取得最好的效果。在日常生活中,它在很多方面都有應(yīng)用,如互聯(lián)網(wǎng)數(shù)據(jù)流、航空公司調(diào)度,甚至包含將求職者與空缺職位進(jìn)行匹配等等。作為論文的作者之一,來自耶魯大學(xué)的Daniel Spielman表示,「我原本堅信,這個問題不可能存在如此高效的算法?!?/span>

Top6:分享信息的新途徑

圖片

普林斯頓大學(xué)的理論計算機(jī)科學(xué)家Mark Braverman,花了一生中超過四分之一的時間,來研究交互式通信的新理論。他的工作使研究人員能夠?qū)Α感畔ⅰ购汀钢R」等術(shù)語進(jìn)行量化,這不僅使人們在理論上對互動有了更多的了解,而且還創(chuàng)造了新的技術(shù),使交流更加高效和準(zhǔn)確。圖片Braverman最喜歡在辦公室的沙發(fā)上思考量化的難題由于他的這一成就,以及其他成果,國際數(shù)學(xué)聯(lián)盟今年7月授予Braverman IMU Abacus獎?wù)?,這是理論計算機(jī)科學(xué)領(lǐng)域的最高榮譽(yù)之一。IMU的頒獎詞指出,Braverman對信息復(fù)雜性的貢獻(xiàn),使人們更深入地了解了當(dāng)兩方相互溝通時,信息成本的不同衡量標(biāo)準(zhǔn)。他的工作為不易受傳輸錯誤影響的新編碼策略,以及在傳輸和操作過程中壓縮數(shù)據(jù)的新方法,鋪平了道路。信息復(fù)雜性問題,來自于Claude Shannon的開拓性工作——在1948年,他為一個人通過通道向另一個人發(fā)送消息,制定了數(shù)學(xué)框架。而Braverman最大的貢獻(xiàn)在于,建立了一個廣泛的框架,該框架闡明了描述交互式通信邊界的通用規(guī)則——這些規(guī)則提出了在通過算法在線發(fā)送數(shù)據(jù)時,壓縮和保護(hù)數(shù)據(jù)的新策略。

圖片

論文地址:https://arxiv.org/abs/1106.3595「交互式壓縮」問題可以這么理解:如果兩個人交換一百萬條****,但只學(xué)習(xí)1,000位信息,交換是否可以壓縮為1,000位守恒?Braverman和Rao的研究表明,答案是否定的。圖片而Braverman不僅破解了這些問題,他還引入了一種新的視角,使研究人員能夠首先闡明它們,然后將它們翻譯成數(shù)學(xué)的正式語言。他的理論為探索這些問題和確定可能出現(xiàn)在未來技術(shù)中的新通信協(xié)議,奠定了基礎(chǔ)。來源:量子位



*博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點(diǎn),如有侵權(quán)請聯(lián)系工作人員刪除。



關(guān)鍵詞: 年終

技術(shù)專區(qū)

關(guān)閉