對(duì)醫(yī)務(wù)人員來(lái)說(shuō),將手術(shù)后的病人縫合在一起是一項(xiàng)至關(guān)重要而又單調(diào)的任務(wù),通常要求他們重復(fù)相同的簡(jiǎn)單動(dòng)作數(shù)百遍。最近在英特爾與加州大學(xué)伯克利分校之間的共同努力下,不久之后,外科醫(yī)生可以將這項(xiàng)繁瑣的工作分擔(dān)給機(jī)器人,不過(guò)只限用于實(shí)現(xiàn)自動(dòng)縫合。
圖片來(lái)源于網(wǎng)絡(luò)
由Ajay Tanwani博士領(lǐng)導(dǎo)的加州大學(xué)伯克利分校(UC Berkeley)團(tuán)隊(duì)開(kāi)發(fā)了一種半監(jiān)督的AI深度學(xué)習(xí)系統(tǒng),稱(chēng)為Motion2Vec。該系統(tǒng)旨在觀看由實(shí)際醫(yī)生進(jìn)行的公開(kāi)手術(shù)視頻,在縫合時(shí)分解醫(yī)生的動(dòng)作(插針、拔針和移交),然后以很高的精度進(jìn)行模擬。
Tanwani告訴Engadget:“與傳統(tǒng)界面以靜態(tài)方式學(xué)習(xí)或從[模仿]軌跡學(xué)習(xí)相比,從視覺(jué)觀察中學(xué)習(xí)具有很大的吸引力,因?yàn)楝F(xiàn)有視頻中提供了大量信息內(nèi)容,” 對(duì)于機(jī)器人教學(xué),一張圖片顯然勝過(guò)千言萬(wàn)語(yǔ)。
Ken Goldberg博士是加州大學(xué)伯克利分校的實(shí)驗(yàn)室負(fù)責(zé)人,也是Tanwani的團(tuán)隊(duì)這項(xiàng)研究的顧問(wèn)。他補(bǔ)充說(shuō):“ YouTube每分鐘獲得500個(gè)小時(shí)的新資料。這是一個(gè)令人難以置信的數(shù)據(jù)庫(kù)。任何人都可以觀看這些視頻中的任意一個(gè)并理解它,但是機(jī)器人目前無(wú)法做到-他們只是將其視為像素流。因此,這項(xiàng)工作的目標(biāo)是嘗試弄清這些像素。那就是看視頻,對(duì)其進(jìn)行分析,然后能夠?qū)⒁曨l分割成有意義的序列。”
為此,該團(tuán)隊(duì)利用暹羅網(wǎng)絡(luò)來(lái)訓(xùn)練AI。Tanwani解釋說(shuō),建立暹羅網(wǎng)絡(luò)是為了從無(wú)監(jiān)督或弱監(jiān)督的數(shù)據(jù)中學(xué)習(xí)距離函數(shù)。他說(shuō):“這里的想法是,您想產(chǎn)生大量重組視頻中的數(shù)據(jù),并將其壓縮為低維流形。暹羅網(wǎng)絡(luò)用于學(xué)習(xí)該流形內(nèi)的距離函數(shù)。”
基本上,這些網(wǎng)絡(luò)可以對(duì)兩個(gè)輸入之間的相似程度進(jìn)行排序,這就是為什么它們經(jīng)常用于圖像識(shí)別任務(wù),例如將某人的監(jiān)控鏡頭與駕駛執(zhí)照照片匹配。但是,在這種情況下,研究小組使用網(wǎng)絡(luò)將機(jī)械手動(dòng)作的視頻輸入與人類(lèi)醫(yī)生執(zhí)行相同動(dòng)作的現(xiàn)有視頻進(jìn)行匹配。目的是將機(jī)器人的性能提高到接近人類(lèi)的水平。
由于該系統(tǒng)依賴(lài)于半監(jiān)督學(xué)習(xí)結(jié)構(gòu),因此該團(tuán)隊(duì)僅需要JIGSAWS數(shù)據(jù)庫(kù)中的78個(gè)視頻即可訓(xùn)練其AI以85.5%的分割準(zhǔn)確的和平均0.94厘米的目標(biāo)定位精度來(lái)執(zhí)行任務(wù)。
這些技術(shù)要進(jìn)入實(shí)際手術(shù)室尚需時(shí)日,但Tanwani相信,一旦實(shí)現(xiàn),外科手術(shù)AI將像當(dāng)今的半自動(dòng)汽車(chē)上駕駛員輔助系統(tǒng)一樣發(fā)揮作用。他們不會(huì)取代人類(lèi)外科醫(yī)生,而是通過(guò)接管低水平,重復(fù)性的任務(wù)來(lái)提高他們的表現(xiàn)。Motion2Vec系統(tǒng)不僅用于縫合。如果有適當(dāng)?shù)挠?xùn)練數(shù)據(jù),AI最終可以承擔(dān)許多職責(zé),例如清創(chuàng)術(shù)(從傷口中挑出死肉和碎屑),但不要指望它執(zhí)行你的下一個(gè)闌尾切除術(shù)。
Goldberg說(shuō):“我們還沒(méi)有做到這一步,但是我們正在朝外科醫(yī)生的能力邁進(jìn),外科醫(yī)生將觀察系統(tǒng),指出他們想要一排縫合線的位置,傳達(dá)出他們想要六個(gè)手縫合線的能力。然后,機(jī)器人將基本上開(kāi)始這樣做,外科醫(yī)生將能夠稍微放松一下,以便他們可以得到更多休息時(shí)間,并能夠?qū)W⒂谑中g(shù)中更復(fù)雜或更細(xì)微的部分。”
Tanwani補(bǔ)充說(shuō):“我們相信,這將有助于外科醫(yī)生有效地將時(shí)間集中在執(zhí)行更復(fù)雜的任務(wù)上,并使用技術(shù)來(lái)協(xié)助他們處理日常工作。”
2025-05-08 22:27
2025-05-08 22:21
2025-05-06 14:45
2025-05-06 14:36
2025-04-29 22:21
2025-04-29 22:19
2025-04-28 12:37
2025-04-28 12:24
2025-04-24 15:08
2025-04-21 12:14