在嵌入式多核集群中利用OCP處理高速緩沖器一致流量

摘要：隨著處理性能的提升超出了單核系統(tǒng)的頻率和功率范圍，導致了多核集群的出現(xiàn)。MIPS科技的MIPS32 1004K一致處理系統(tǒng)(CPS)采用開放內(nèi)核協(xié)議(OCP)點對點連接，可在整個集群中建立基于偵聽的一致性。本文詳細介紹這種通信模型的原理。

關(guān)鍵詞：1004K；OCP；一致處理；高速緩沖器一致；多核

　　Matthias Knoth：設計工程師，負責低功耗、微架構(gòu)和1004K處理器方案。

源于一種基于消息的存儲一致模型

　　傳統(tǒng)上，多處理器系統(tǒng)中的存儲器一致性都是通過總線偵聽實現(xiàn)的，每個內(nèi)核都與一個通用多層總線連接，能夠偵聽同級處理器的存儲器存取流量，以調(diào)節(jié)每個高速緩沖器行的一致狀態(tài)。這樣，每個內(nèi)核都在本地保持了L1高速緩沖器行的一致狀態(tài)，并通過通用總線將狀態(tài)的改變通知同級處理器。

　　SoC不斷增加的面積和復雜性導致了多層總線基本哲學的改變，以利于采用集中流量路由的本地點對點連接。由于負載的減少和段長的縮短，這將有助于顯著加速和推動現(xiàn)在的本地化總線段的改善。同時，也可以緩解總線爭用問題，同時增加了本地化數(shù)據(jù)交換吞吐量。為了滿足這一系統(tǒng)架構(gòu)趨勢，出現(xiàn)了OCP(開放內(nèi)核協(xié)議)標準，進一步鞏固了這一設計哲學。另外，IP供應商業(yè)務模式的出現(xiàn)催化了IP互連和設計方法的標準化，有利于在一個開放標準基礎(chǔ)上實現(xiàn)設計的復用。

　　然而，與通過OCP互連段操控一樣，本地化總線執(zhí)行將整個多核集群上的處理器分拆開。一致方案不能直接基于總線偵聽和依賴總線仲裁來確保存取排序，需要不同的通信方法來確保數(shù)據(jù)存取的一致性。在爭用L1行數(shù)據(jù)請求排序的過程中，其他挑戰(zhàn)也浮現(xiàn)出來。應對這些挑戰(zhàn)的一種方法是給每個處理單元增加一致消息通信，如圖1所示。這些消息提供了偵聽型緩沖器一致的方法。

圖 1  一致處理系統(tǒng)

　　一致消息包含了OCP協(xié)議中的一個新命令。處理器系統(tǒng)中的成員向一個集中一致管理器發(fā)送一致消息。該管理器提供存取排序(順序化)和消息路由，為同級成員提供偵聽型存取。這些同級成員將以其單獨的L1行狀態(tài)進行響應，并發(fā)出一個消息響應。根據(jù)這些響應，一致管理器發(fā)起對內(nèi)核間一致數(shù)據(jù)的數(shù)據(jù)移動，將存取集中在更高級別的存儲器層，如L2和L3高速緩沖器。I/O一致單元還可提供一種方式逐漸采用/逐漸淘汰數(shù)據(jù)進/出一致地址空間的數(shù)據(jù)，它是一致消息交換的一部分。

　　除了OCP協(xié)議中的新消息類命令外，還需要具體的處理器響應一致狀態(tài)請求，因此它們不只是總線處理的發(fā)動者(主控)。一致處理系統(tǒng)滿足這一要求的方法可能是通過提供一個OCP從端口來接收和響應一致管理器發(fā)送的消息。處理器的一致請求將利用OCP主端口。在處理集群內(nèi)，內(nèi)核間和一致管理器之間的一致消息交換被稱為“干預”。處理器的OCP從端口接收干預，因此稱為“干預端口”。

　　如圖1所示，1004K系統(tǒng)的每個獨立處理器都是基于我們多線程處理器架構(gòu)的，可以在單標量、9級流水線范圍內(nèi)提供兩個獨立線程并處理上下文。復制的1級數(shù)據(jù)高速緩沖器標記陣列可同時用于存取CPU操作和干預查尋。一致處理系統(tǒng)可支持MESI型高速緩沖器行一致性。

　　處理系統(tǒng)一致管理器通過其請求單元—OCP從端口，在每個CPU和I/O一致單元的推動下，接收進入的消息并對其進行串化。串化的消息按照其地址空間和上下文，或使用“存儲器接口單元”發(fā)送到更高級別的高速緩沖器層，或使用“偵聽代理”發(fā)送至同級處理器和I/O一致單元。偵聽代理發(fā)起OCP主處理(干預)來查尋每個處理器的一致L1高速緩沖器行狀態(tài)。干預返回到消息發(fā)起者，稱為自我干預，有助于發(fā)起者提供存取排序。對 CPU 發(fā)起的一致消息響應和數(shù)據(jù)響應是在“響應單元”內(nèi)確立的，并發(fā)送到每個 CPU。

一致OCP命令

　　在1004K CPS中使用的OCP命令可以分成三類。

　　第一類是保持MESI型高速緩沖器行狀態(tài)的一致消息。它們是CPU負載/存儲操作的結(jié)果，能夠發(fā)起CPU和/或存儲器子系統(tǒng)之間的數(shù)據(jù)移動。CPS(一致處理系統(tǒng))的所有同級CPU將接收由一個發(fā)起者發(fā)送的一致消息，并根據(jù)它們的高速緩沖器行一致狀態(tài)做出響應。一致管理器將根據(jù)需要發(fā)起數(shù)據(jù)移動。

　　一致高速緩沖器操作指令用于一致地址空間內(nèi)高速緩沖器行的維護。I/O流量將新的一致行帶入該域，或?qū)⒁恢律舷挛膹母咚倬彌_器行中移除。另外，還要進行存儲器層的同步化操作。

　　第三類是非一致命令，在一致地址空間外的存儲區(qū)中執(zhí)行OCP主端口處理。它們代表了OCP讀寫命令。