長(zhǎng)期以來(lái)，機(jī)器學(xué)習(xí)被認(rèn)為是一項(xiàng)有前途的技術(shù)，將改變現(xiàn)有的傳統(tǒng)光網(wǎng)絡(luò)，推動(dòng)其向下一代智能和自主實(shí)體邁進(jìn)。過(guò)去幾年里，工業(yè)界和學(xué)術(shù)界都見(jiàn)證了機(jī)器學(xué)習(xí)在光纖通信不同方面的應(yīng)用，利用機(jī)器學(xué)習(xí)的研究顯著增加。研究者們?cè)诙鄠€(gè)領(lǐng)域展開(kāi)了積極探索，從網(wǎng)絡(luò)組件的設(shè)計(jì)到關(guān)鍵傳輸損傷的補(bǔ)償，再到網(wǎng)絡(luò)數(shù)據(jù)流量模式的預(yù)測(cè)。然而，盡管過(guò)去十年該領(lǐng)域的研究興趣空前高漲，開(kāi)發(fā)的機(jī)器學(xué)習(xí)方法在現(xiàn)實(shí)世界光纖網(wǎng)絡(luò)中的實(shí)際部署、聲譽(yù)和影響仍未達(dá)到預(yù)期。
近日，清華大學(xué)深圳國(guó)際研究生院副教授費(fèi)薩爾·納迪姆·汗（Faisal Nadeem KHAN）在研究中指出，在商業(yè)光纖網(wǎng)絡(luò)中廣泛部署基于機(jī)器學(xué)習(xí)解決方案的主要障礙在于一些尚未解決的非技術(shù)性限制因素，這些因素對(duì)實(shí)際網(wǎng)絡(luò)來(lái)說(shuō)至關(guān)重要，但在很大程度上被利益相關(guān)者忽略。為此，團(tuán)隊(duì)系統(tǒng)地確定了七個(gè)主要的非技術(shù)性障礙（圖1），包括遺留系統(tǒng)和流程的普遍存在、成本限制、專家勞動(dòng)力的限制、數(shù)據(jù)可訪問(wèn)性和隱私保護(hù)問(wèn)題、機(jī)器學(xué)習(xí)模型的可解釋性以及透明性和問(wèn)責(zé)性問(wèn)題、缺乏機(jī)器學(xué)習(xí)輔助方法的標(biāo)準(zhǔn)和監(jiān)管政策、人為因素和認(rèn)知偏見(jiàn)。
圖1.機(jī)器學(xué)習(xí)輔助方法在實(shí)際光纖網(wǎng)絡(luò)中面臨的七個(gè)關(guān)鍵非技術(shù)挑戰(zhàn)
為了證明此觀點(diǎn)，研究人員以光網(wǎng)絡(luò)中的網(wǎng)絡(luò)故障管理、端到端（E2E）通信系統(tǒng)優(yōu)化、光路傳輸質(zhì)量（QoT）估計(jì)、光性能監(jiān)測(cè)（OPM）和網(wǎng)絡(luò)安全管理五個(gè)主要機(jī)器學(xué)習(xí)應(yīng)用領(lǐng)域?yàn)槔敿?xì)分析了面臨的非技術(shù)性障礙，并討論了上述障礙如何顯著削弱了機(jī)器學(xué)習(xí)輔助方法在實(shí)際光纖網(wǎng)絡(luò)中的部署前景。
研究還根據(jù)解決這些問(wèn)題所面臨的難度對(duì)非技術(shù)挑戰(zhàn)進(jìn)行了排名（圖2）。研究人員認(rèn)為首先要克服的兩大挑戰(zhàn)是遺留問(wèn)題和成本限制，因?yàn)楦脑飕F(xiàn)有光纖網(wǎng)絡(luò)基礎(chǔ)設(shè)施所需的財(cái)務(wù)影響至關(guān)重要。接下來(lái)，實(shí)現(xiàn)標(biāo)準(zhǔn)化和監(jiān)管框架是開(kāi)發(fā)可在光網(wǎng)絡(luò)中普遍操作的機(jī)器學(xué)習(xí)輔助方法的關(guān)鍵問(wèn)題，因?yàn)檫@需要工業(yè)界、標(biāo)準(zhǔn)化組織和監(jiān)管機(jī)構(gòu)的共同努力，而這方面的努力目前仍然不足。第四個(gè)關(guān)鍵挑戰(zhàn)是提供全球訪問(wèn)相關(guān)數(shù)據(jù)源的途徑，同時(shí)保護(hù)數(shù)據(jù)隱私和匿名性。然而，建立這樣的數(shù)據(jù)共享機(jī)制并為專有網(wǎng)絡(luò)數(shù)據(jù)定義明確的數(shù)據(jù)使用條款仍在進(jìn)行中。
接下來(lái)的兩個(gè)問(wèn)題依次是機(jī)器學(xué)習(xí)模型的可解釋性/問(wèn)責(zé)性問(wèn)題和存在的故意/無(wú)意偏見(jiàn)問(wèn)題，雖然這些問(wèn)題不會(huì)從根本上阻礙機(jī)器學(xué)習(xí)輔助工具的實(shí)施，但解決這些問(wèn)題對(duì)于在光網(wǎng)絡(luò)中實(shí)現(xiàn)可信的決策過(guò)程至關(guān)重要。最后，專家勞動(dòng)力的限制在短期內(nèi)是一個(gè)緊迫問(wèn)題，因?yàn)槭澜绺鞯氐墓I(yè)界、學(xué)術(shù)界和政府最近對(duì)培養(yǎng)基本的機(jī)器學(xué)習(xí)知識(shí)和技能表現(xiàn)出了興趣，這可能會(huì)在未來(lái)應(yīng)對(duì)可用勞動(dòng)力短缺問(wèn)題時(shí)有所改善。
圖2.阻礙在光纖網(wǎng)絡(luò)中大規(guī)模部署機(jī)器學(xué)習(xí)解決方案的七個(gè)關(guān)鍵非技術(shù)性障礙的難度級(jí)別
更深層次地，團(tuán)隊(duì)提供了一套廣泛的新穎解決方案，可以在解決現(xiàn)有的各個(gè)非技術(shù)挑戰(zhàn)中發(fā)揮重要作用，從而為未來(lái)光纖通信網(wǎng)絡(luò)中機(jī)器學(xué)習(xí)驅(qū)動(dòng)的智能操作和決策的廣泛應(yīng)用鋪平道路。
近日，相關(guān)研究成果以“非技術(shù)性障礙：通往AI驅(qū)動(dòng)智能光網(wǎng)絡(luò)的最后一關(guān)”（Non-technological barriers: the last frontiertowards AI-powered intelligent opticalnetworks）為題，發(fā)表在《自然·通訊》（Nature Communications）。
費(fèi)薩爾·納迪姆·汗（Faisal Nadeem KHAN）為論文作者。該研究得到了清華大學(xué)深圳國(guó)際研究生院科研啟動(dòng)基金的支持。