【
技術(shù)領(lǐng)域：
：】本發(fā)明涉及醫(yī)療
技術(shù)領(lǐng)域：
：，尤其涉及一種手術(shù)室監(jiān)控方法和一種手術(shù)室監(jiān)控裝置。
背景技術(shù)：
：：目前，傳統(tǒng)的手術(shù)室監(jiān)控系統(tǒng)可以獲取手術(shù)室中的實(shí)時(shí)圖像，以便遠(yuǎn)程學(xué)習(xí)或監(jiān)控醫(yī)生的手術(shù)過程。然而，這種監(jiān)控方式僅僅是簡(jiǎn)單拍攝了手術(shù)過程的視頻，該視頻所能夠提供的信息量十分有限，不便于對(duì)手術(shù)過程的全面掌控。因此，如何提供一種更為全面有效的手術(shù)室監(jiān)控方式，成為目前亟待解決的技術(shù)問題。技術(shù)實(shí)現(xiàn)要素：本發(fā)明實(shí)施例提供了一種手術(shù)室監(jiān)控方法和一種手術(shù)室監(jiān)控裝置，旨在解決相關(guān)技術(shù)中的手術(shù)室監(jiān)控系統(tǒng)提供的信息量十分有限的技術(shù)問題，能夠提供一種新的手術(shù)室監(jiān)控方式，能夠遠(yuǎn)程輸出手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，便于對(duì)手術(shù)過程進(jìn)行全方位的學(xué)習(xí)和監(jiān)控。第一方面，本發(fā)明實(shí)施例提供了一種手術(shù)室監(jiān)控方法，包括：獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像；將所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像傳輸至輸出設(shè)備；在所述輸出設(shè)備上輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，以供通過所述輸出設(shè)備對(duì)所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像中的實(shí)時(shí)虛擬進(jìn)行處理。在本發(fā)明上述實(shí)施例中，可選地，所述在所述輸出設(shè)備上輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像的步驟，包括：通過普通顯示器、虛擬現(xiàn)實(shí)顯示器、增強(qiáng)現(xiàn)實(shí)顯示器或混合現(xiàn)實(shí)顯示器中的一種或多種顯示器輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像；所述通過所述輸出設(shè)備對(duì)所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像中的實(shí)時(shí)虛擬進(jìn)行處理的方式包括添加虛擬物體、改變虛擬物體的位置、刪除虛擬物體和改變虛擬物體的顯示效果中的一項(xiàng)或多項(xiàng)。在本發(fā)明上述實(shí)施例中，可選地，所述獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像的步驟，具體包括：通過拍攝裝置獲取手術(shù)室的全景實(shí)物圖像；根據(jù)即時(shí)定位系統(tǒng)，確定所述攝像機(jī)的位置信息；確定虛擬物體的位置信息；根據(jù)已確定的所述虛擬物體的位置信息和所述攝像機(jī)的位置信息，生成所述手術(shù)室的虛擬物體圖像；通過預(yù)定設(shè)備將所述虛擬物體圖像與所述全景實(shí)物圖像融合，得到所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像。在本發(fā)明上述實(shí)施例中，可選地，所述確定虛擬物體的位置信息包括：根據(jù)幾何信息、生物信息、物理信息中的一種或多種信息，通過自動(dòng)算法或手動(dòng)設(shè)置確定虛擬物體的位置和形態(tài)，所述自動(dòng)算法包括目標(biāo)對(duì)象識(shí)別、3d姿態(tài)估計(jì)、圖像配準(zhǔn)、點(diǎn)云匹配、動(dòng)作捕捉等中的一種或多種算法。在本發(fā)明上述實(shí)施例中，可選地，所述通過預(yù)定設(shè)備將所述虛擬物體圖像與所述全景實(shí)物圖像融合的步驟，具體包括：將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上；或者根據(jù)所述全景實(shí)物圖像的屬性，對(duì)所述虛擬物體圖像的屬性進(jìn)行調(diào)整，并在調(diào)整后將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上，其中，所述屬性包括圖像尺寸、圖像亮度、圖像對(duì)比度和圖像顏色比例中的一項(xiàng)或多項(xiàng)。在本發(fā)明上述實(shí)施例中，可選地，所述即時(shí)定位系統(tǒng)包括：即時(shí)定位與地圖構(gòu)建系統(tǒng)或lighthouse系統(tǒng)，以及所述預(yù)定設(shè)備包括：虛擬現(xiàn)實(shí)設(shè)備、增強(qiáng)現(xiàn)實(shí)設(shè)備或混合現(xiàn)實(shí)設(shè)備，所述輸出設(shè)備包括：遠(yuǎn)程設(shè)備或本地設(shè)備。第二方面，本發(fā)明實(shí)施例提供了一種手術(shù)室監(jiān)控裝置，包括：混合圖像獲取單元，獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像；遠(yuǎn)程傳輸單元，將所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像傳輸至輸出設(shè)備；遠(yuǎn)程輸出單元，在所述輸出設(shè)備上輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，以供通過所述輸出設(shè)備對(duì)所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像中的實(shí)時(shí)虛擬進(jìn)行處理。在本發(fā)明上述實(shí)施例中，可選地，所述遠(yuǎn)程輸出單元具體用于：通過普通顯示器、虛擬現(xiàn)實(shí)顯示器、增強(qiáng)現(xiàn)實(shí)顯示器或混合現(xiàn)實(shí)顯示器中的一種或多種顯示器輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，以及添加虛擬物體、改變虛擬物體的位置、刪除虛擬物體和改變虛擬物體的顯示效果中的一項(xiàng)或多項(xiàng)。在本發(fā)明上述實(shí)施例中，可選地，所述混合圖像獲取單元包括：實(shí)物圖像獲取單元，通過拍攝裝置獲取手術(shù)室的全景實(shí)物圖像；即時(shí)定位單元，根據(jù)即時(shí)定位系統(tǒng)，確定所述攝像機(jī)的位置信息；位置確定單元，確定虛擬物體的位置信息；虛擬圖像獲取單元，根據(jù)已確定的所述虛擬物體的位置信息和所述攝像機(jī)的位置信息，生成所述手術(shù)室的虛擬物體圖像；圖像融合單元，通過預(yù)定設(shè)備將所述虛擬物體圖像與所述全景實(shí)物圖像融合，得到所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像。在本發(fā)明上述實(shí)施例中，可選地，所述位置確定單元具體用于：根據(jù)幾何信息、生物信息、物理信息中的一種或多種信息，通過自動(dòng)算法或手動(dòng)設(shè)置確定虛擬物體的位置和形態(tài)，其中，所述自動(dòng)算法包括目標(biāo)對(duì)象識(shí)別、3d姿態(tài)估計(jì)、圖像配準(zhǔn)、點(diǎn)云匹配、動(dòng)作捕捉等中的一種或多種算法。在本發(fā)明上述實(shí)施例中，可選地，所述圖像融合單元具體用于：將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上，或者根據(jù)所述全景實(shí)物圖像的屬性，對(duì)所述虛擬物體圖像的屬性進(jìn)行調(diào)整，并在調(diào)整后將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上，其中，所述屬性包括圖像尺寸、圖像亮度、圖像對(duì)比度和圖像顏色比例中的一項(xiàng)或多項(xiàng)。在本發(fā)明上述實(shí)施例中，可選地，所述即時(shí)定位系統(tǒng)包括：即時(shí)定位與地圖構(gòu)建系統(tǒng)或lighthouse系統(tǒng)，以及所述預(yù)定設(shè)備包括：虛擬現(xiàn)實(shí)設(shè)備、增強(qiáng)現(xiàn)實(shí)設(shè)備或混合現(xiàn)實(shí)設(shè)備，所述輸出設(shè)備包括：遠(yuǎn)程設(shè)備或本地設(shè)備。以上技術(shù)方案，針對(duì)相關(guān)技術(shù)中的手術(shù)室監(jiān)控系統(tǒng)提供的信息量十分有限的技術(shù)問題，能夠提供一種新的手術(shù)室監(jiān)控方式，具體來說，在將增強(qiáng)現(xiàn)實(shí)技術(shù)引入手術(shù)室之后，可以通過虛擬現(xiàn)實(shí)技術(shù)、增強(qiáng)現(xiàn)實(shí)技術(shù)或混合現(xiàn)實(shí)技術(shù)獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，并將該混合圖像傳輸給輸出設(shè)備進(jìn)行顯示，從而可以將混合現(xiàn)實(shí)手術(shù)中的場(chǎng)景通過網(wǎng)絡(luò)的方式實(shí)時(shí)傳輸出來，用于直播教學(xué)或遠(yuǎn)程指導(dǎo)等方面，便于對(duì)手術(shù)過程進(jìn)行全方位的學(xué)習(xí)和監(jiān)控，提升了用戶體驗(yàn)?！靖綀D說明】為了更清楚地說明本發(fā)明實(shí)施例的技術(shù)方案，下面將對(duì)實(shí)施例中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動(dòng)性的前提下，還可以根據(jù)這些附圖獲得其它的附圖。圖1示出了本發(fā)明的一個(gè)實(shí)施例的手術(shù)室監(jiān)控方法的流程圖；圖2示出了本發(fā)明的一個(gè)實(shí)施例的獲取混合圖像的流程圖；圖3示出了本發(fā)明的一個(gè)實(shí)施例的手術(shù)室監(jiān)控裝置的框圖；圖4示出了本發(fā)明的一個(gè)實(shí)施例的監(jiān)控設(shè)備的框圖?！揪唧w實(shí)施方式】為了更好的理解本發(fā)明的技術(shù)方案，下面結(jié)合附圖對(duì)本發(fā)明實(shí)施例進(jìn)行詳細(xì)描述。應(yīng)當(dāng)明確，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其它實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。在本發(fā)明實(shí)施例中使用的術(shù)語(yǔ)是僅僅出于描述特定實(shí)施例的目的，而非旨在限制本發(fā)明。在本發(fā)明實(shí)施例和所附權(quán)利要求書中所使用的單數(shù)形式的“一種”、“所述”和“該”也旨在包括多數(shù)形式，除非上下文清楚地表示其他含義。圖1示出了本發(fā)明的一個(gè)實(shí)施例的手術(shù)室監(jiān)控方法的流程圖。如圖1所示，本發(fā)明的一個(gè)實(shí)施例的手術(shù)室監(jiān)控方法，包括：步驟102，獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像。其中，實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像指的是在手術(shù)室的實(shí)物圖像中融合了虛擬圖像后得到的圖像，獲取該混合圖像可使用虛擬現(xiàn)實(shí)技術(shù)、增強(qiáng)現(xiàn)實(shí)技術(shù)或混合現(xiàn)實(shí)技術(shù)。比如，在直播手術(shù)時(shí)，顯示界面可在顯示實(shí)時(shí)手術(shù)過程的同時(shí)，顯示為每個(gè)手術(shù)步驟實(shí)時(shí)標(biāo)注顯示對(duì)應(yīng)的名稱和所需器械。步驟104，將所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像傳輸至輸出設(shè)備。步驟106，在所述輸出設(shè)備上輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，以供通過所述輸出設(shè)備對(duì)所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像中的實(shí)時(shí)虛擬進(jìn)行處理。在將增強(qiáng)現(xiàn)實(shí)技術(shù)引入手術(shù)室之后，可以獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，并將該混合圖像傳輸給輸出設(shè)備進(jìn)行顯示，從而可以將混合現(xiàn)實(shí)手術(shù)中的場(chǎng)景通過網(wǎng)絡(luò)的方式實(shí)時(shí)傳輸出來，用于直播教學(xué)或遠(yuǎn)程指導(dǎo)等方面，便于對(duì)手術(shù)過程進(jìn)行全方位的學(xué)習(xí)和監(jiān)控，提升了用戶體驗(yàn)。圖2示出了本發(fā)明的一個(gè)實(shí)施例的獲取混合圖像的流程圖。如圖2所示，獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像的過程具體包括：步驟202，通過拍攝裝置獲取手術(shù)室的全景實(shí)物圖像。其中，拍攝裝置可以為具有全景功能的攝像機(jī)，當(dāng)然，也可以為具有景拍攝功能的任何其他設(shè)備，將拍攝裝置連接至服務(wù)器，即可將拍攝到的手術(shù)室的全景實(shí)物圖像上傳至服務(wù)器，以便服務(wù)器進(jìn)行進(jìn)一步處理。步驟204，根據(jù)即時(shí)定位系統(tǒng)，確定所述攝像機(jī)的位置信息。即時(shí)定位系統(tǒng)包括：slam(simultaneouslocalizationandmapping，即時(shí)定位與地圖構(gòu)建)系統(tǒng)或lighthouse系統(tǒng)，其中，slam系統(tǒng)的原理為：目標(biāo)對(duì)象在應(yīng)用環(huán)境中從一個(gè)位置開始移動(dòng),在移動(dòng)過程中slam系統(tǒng)根據(jù)位置估計(jì)和地圖進(jìn)行目標(biāo)對(duì)象的定位，同時(shí)在對(duì)目標(biāo)對(duì)象定位的基礎(chǔ)上建造增量式地圖，實(shí)現(xiàn)目標(biāo)對(duì)象的自主定位和導(dǎo)航。而lighthouse系統(tǒng)的核心原理為：利用房間中密度極大的非可見光，來探測(cè)室內(nèi)佩戴vr(virtualreality，虛擬現(xiàn)實(shí))設(shè)備的玩家的位置和動(dòng)作變化，并將其模擬在虛擬現(xiàn)實(shí)3d空間中。當(dāng)然，所使用的即時(shí)定位系統(tǒng)不限于上述兩種，還可以是根據(jù)需要除此之外的任何其他即時(shí)定位系統(tǒng)。由此可知，通過即時(shí)定位系統(tǒng)，能夠確定攝像機(jī)的位置信息，從而便于結(jié)合攝像機(jī)的位置信息，進(jìn)一步確定虛擬物體的相對(duì)位置信息，為形成虛擬物體圖像提供基礎(chǔ)。步驟206，根據(jù)已確定的所述虛擬物體的位置信息和所述攝像機(jī)的位置信息，生成所述手術(shù)室的虛擬物體圖像。當(dāng)然，在此之前，還包括確定虛擬物體的位置信息，以供在步驟206中將虛擬物體的位置信息作為生成所述手術(shù)室的虛擬物體圖像的依據(jù)之一。具體來說，確定虛擬物體的位置信息的步驟，具體包括：根據(jù)幾何信息、生物信息、物理信息中的一種或多種信息，通過自動(dòng)算法或手動(dòng)設(shè)置確定虛擬物體的位置和形態(tài)，其中，所述自動(dòng)算法包括目標(biāo)對(duì)象識(shí)別、3d姿態(tài)估計(jì)、圖像配準(zhǔn)、點(diǎn)云匹配、動(dòng)作捕捉等中的一種或多種算法。由此，多樣化的虛擬物體位置確定方式帶來了更加多樣化的選擇，以適配具有不同自動(dòng)算法的系統(tǒng)。當(dāng)然，確定虛擬物體的位置的方式不限于上述內(nèi)容，還可以通過任何其他算法來確定虛擬物體的位置，當(dāng)然，用戶也可以在輸出設(shè)備端進(jìn)行操作以手動(dòng)設(shè)置虛擬物體的位置。虛擬物體可以由系統(tǒng)預(yù)先進(jìn)行配置或?qū)崟r(shí)進(jìn)行配置，也可以由遠(yuǎn)程設(shè)備輸出設(shè)備側(cè)進(jìn)行配置。比如，在兩個(gè)醫(yī)生進(jìn)行手術(shù)的過程中，需要對(duì)兩個(gè)醫(yī)生進(jìn)行區(qū)分，以便遠(yuǎn)程專家進(jìn)行指導(dǎo)時(shí)，醫(yī)生可以準(zhǔn)確地接收命令，因此，系統(tǒng)可以自動(dòng)確定兩個(gè)字符“a”和“b”作為虛擬物體，預(yù)計(jì)分別標(biāo)注在兩個(gè)醫(yī)生的頭頂，或者，遠(yuǎn)程設(shè)備輸出設(shè)備側(cè)也可以直接設(shè)置兩個(gè)醫(yī)生的標(biāo)注為“a”和“b”，作為虛擬物體分別標(biāo)注在兩個(gè)醫(yī)生的頭頂，以便遠(yuǎn)程專家可以方便地區(qū)分這兩個(gè)醫(yī)生。此時(shí)，可以根據(jù)攝像機(jī)的位置信息，通過相對(duì)位置計(jì)算公式等方式，計(jì)算兩個(gè)字符“a”和“b”所應(yīng)該在的相對(duì)位置，并在該相對(duì)位置生成兩個(gè)字符“a”和“b”，也就是虛擬物體圖像。綜上，虛擬物體圖像的存在可以便于輸出設(shè)備端的用戶更加方便地獲知手術(shù)室的實(shí)時(shí)信息。步驟208，通過預(yù)定設(shè)備將所述虛擬物體圖像與所述全景實(shí)物圖像融合，得到所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像。將虛擬物體圖像與全景實(shí)物圖像融合顯示，可供輸出設(shè)備端的用戶更加方便地獲知更加生動(dòng)的手術(shù)室的實(shí)時(shí)信息，增加了輸出設(shè)備端所能夠得到的信息量，對(duì)手術(shù)效率或輸出設(shè)備端的學(xué)習(xí)效率都產(chǎn)生了很大的提升。其中，預(yù)定設(shè)備包括：虛擬現(xiàn)實(shí)設(shè)備、增強(qiáng)現(xiàn)實(shí)設(shè)備或混合現(xiàn)實(shí)設(shè)備，虛擬現(xiàn)實(shí)設(shè)備即vr設(shè)備，可生成多源信息融合的、交互式的三維動(dòng)態(tài)視景和實(shí)體行為的仿真環(huán)境；增強(qiáng)現(xiàn)實(shí)設(shè)備即ar設(shè)備(augmentedreality)可生成虛擬數(shù)字畫面加上裸眼現(xiàn)實(shí)；混合現(xiàn)實(shí)設(shè)備即mr(mediatedreality)設(shè)備，mr也可以稱為介導(dǎo)現(xiàn)實(shí)，結(jié)合了vr與ar的優(yōu)勢(shì)，能夠更好地將ar技術(shù)體現(xiàn)出來，并利用vr視角大的優(yōu)勢(shì)彌補(bǔ)ar的視角不足的情況。當(dāng)然，預(yù)定設(shè)備還可以是其他任何能夠融合得到實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像的設(shè)備，不限于上述三種。另外，所述輸出設(shè)備包括：遠(yuǎn)程設(shè)備或本地設(shè)備，即既可以實(shí)現(xiàn)本地傳輸，也可以實(shí)現(xiàn)遠(yuǎn)程傳輸，為遠(yuǎn)程會(huì)診等醫(yī)療方式提供了便利。在本發(fā)明的一種實(shí)現(xiàn)方式中，步驟208中，可以將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上，以實(shí)現(xiàn)融合的目的，這種方式的后臺(tái)操作簡(jiǎn)單，能夠提升系統(tǒng)運(yùn)行的效率。在本發(fā)明的另一種實(shí)現(xiàn)方式中，步驟208中，還可以根據(jù)所述全景實(shí)物圖像的屬性，對(duì)所述虛擬物體圖像的屬性進(jìn)行調(diào)整，并在調(diào)整后將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上。這樣一來，可避免因全景實(shí)物圖像與虛擬物體圖像的屬性不相符而造成的融合效果差的問題，能夠得到更加優(yōu)質(zhì)的混合圖像，增加了對(duì)手術(shù)室的實(shí)時(shí)情況掌握的有效性，提升了用戶體驗(yàn)。另外，所述屬性包括但不限于圖像尺寸、圖像亮度、圖像對(duì)比度和圖像顏色比例中的一項(xiàng)或多項(xiàng)。比如，當(dāng)虛擬物體圖像的尺寸遠(yuǎn)小于全景實(shí)物圖像時(shí)，將虛擬物體圖像融合放置在全景實(shí)物圖像上，很難看清虛擬物體圖像具體是什么內(nèi)容，影響對(duì)混合圖像發(fā)觀察和分析，不便于對(duì)手術(shù)的學(xué)習(xí)或指導(dǎo)。因此，可以按照系統(tǒng)中的預(yù)定尺寸比例調(diào)整虛擬物體圖像的尺寸。在本發(fā)明的另一種實(shí)現(xiàn)方式中，根據(jù)實(shí)際需要，也可以根據(jù)所述虛擬物體圖像的屬性，對(duì)所述全景實(shí)物圖像的屬性進(jìn)行調(diào)整。在上述任一實(shí)施例的基礎(chǔ)上，可通過普通顯示器、虛擬現(xiàn)實(shí)顯示器、增強(qiáng)現(xiàn)實(shí)顯示器或混合現(xiàn)實(shí)顯示器中的一種或多種顯示器輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像。這樣，增加了實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像的顯示方式，取代了相關(guān)技術(shù)中只能佩戴眼鏡設(shè)備才能使用戶個(gè)人看到眼鏡中顯示的混合圖像的方案，能夠?qū)⒒旌蠄D像以普通顯示器或其他類型的顯示器直接顯示，降低了顯示成本，提升了用戶獲取混合圖像的便利性。需要補(bǔ)充的是，所述通過所述輸出設(shè)備對(duì)所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像中的實(shí)時(shí)虛擬進(jìn)行處理的方式包括添加虛擬物體、改變虛擬物體的位置、刪除虛擬物體和改變虛擬物體的顯示效果中的一項(xiàng)或多項(xiàng)。例如：遠(yuǎn)程手術(shù)指導(dǎo)時(shí)，當(dāng)輸出設(shè)備端的用戶口頭表達(dá)不夠明確，可以通過操作輸出設(shè)備顯示的虛擬物體來進(jìn)行標(biāo)注說明，如高亮手術(shù)位置、高亮手術(shù)路徑、標(biāo)注手術(shù)方式信息等。圖3示出了本發(fā)明的一個(gè)實(shí)施例的手術(shù)室監(jiān)控裝置的框圖。如圖3所示，本發(fā)明的一個(gè)實(shí)施例的手術(shù)室監(jiān)控裝置300，包括：混合圖像獲取單元302、遠(yuǎn)程傳輸單元304和遠(yuǎn)程輸出單元306。其中，混合圖像獲取單元302用于獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像；遠(yuǎn)程傳輸單元304用于將所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像傳輸至輸出設(shè)備；遠(yuǎn)程輸出單元306用于在所述輸出設(shè)備上輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，以供通過所述輸出設(shè)備對(duì)所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像中的實(shí)時(shí)虛擬進(jìn)行處理。由于手術(shù)室監(jiān)控裝置300使用圖1和圖2示出的任一實(shí)施例所述的方法，因此，手術(shù)室監(jiān)控裝置300具有與圖1和圖2示出的任一實(shí)施例相同的技術(shù)效果在此不再贅述。在本發(fā)明的一種實(shí)現(xiàn)方式中，所述遠(yuǎn)程輸出單元具體用于：通過普通顯示器、虛擬現(xiàn)實(shí)顯示器、增強(qiáng)現(xiàn)實(shí)顯示器或混合現(xiàn)實(shí)顯示器中的一種或多種顯示器輸出所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，以及添加虛擬物體、改變虛擬物體的位置、刪除虛擬物體和改變虛擬物體的顯示效果中的一項(xiàng)或多項(xiàng)。在本發(fā)明的一種實(shí)現(xiàn)方式中，所述混合圖像獲取單元包括：實(shí)物圖像獲取單元，通過拍攝裝置獲取手術(shù)室的全景實(shí)物圖像；即時(shí)定位單元，根據(jù)即時(shí)定位系統(tǒng)，確定所述攝像機(jī)的位置信息；位置確定單元，確定虛擬物體的位置信息；虛擬圖像獲取單元，根據(jù)已確定的所述虛擬物體的位置信息和所述攝像機(jī)的位置信息，生成所述手術(shù)室的虛擬物體圖像；圖像融合單元，通過預(yù)定設(shè)備將所述虛擬物體圖像與所述全景實(shí)物圖像融合，得到所述實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像。在本發(fā)明的一種實(shí)現(xiàn)方式中，所述位置確定單元具體用于：根據(jù)幾何信息、生物信息、物理信息中的一種或多種信息，通過自動(dòng)算法或手動(dòng)設(shè)置確定虛擬物體的位置和形態(tài)，其中，所述自動(dòng)算法包括目標(biāo)對(duì)象識(shí)別、3d姿態(tài)估計(jì)、圖像配準(zhǔn)、點(diǎn)云匹配、動(dòng)作捕捉中的一種或多種算法。在本發(fā)明的一種實(shí)現(xiàn)方式中，所述圖像融合單元具體用于：將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上，或者根據(jù)所述全景實(shí)物圖像的屬性，對(duì)所述虛擬物體圖像的屬性進(jìn)行調(diào)整，并在調(diào)整后將所述虛擬物體圖像通過直接覆蓋、或不透明度混合、或融合算法融合至所述全景實(shí)物圖像上，其中，所述屬性包括圖像尺寸、圖像亮度、圖像對(duì)比度和圖像顏色比例中的一項(xiàng)或多項(xiàng)。在本發(fā)明的一種實(shí)現(xiàn)方式中，所述即時(shí)定位系統(tǒng)包括：即時(shí)定位與地圖構(gòu)建系統(tǒng)或lighthouse系統(tǒng)，以及所述預(yù)定設(shè)備包括：虛擬現(xiàn)實(shí)設(shè)備、增強(qiáng)現(xiàn)實(shí)設(shè)備或混合現(xiàn)實(shí)設(shè)備，所述輸出設(shè)備包括：遠(yuǎn)程設(shè)備或本地設(shè)備。圖4示出了本發(fā)明的一個(gè)實(shí)施例的監(jiān)控設(shè)備的框圖。如圖4所示，根據(jù)本發(fā)明的一個(gè)實(shí)施例的監(jiān)控設(shè)備400，包括圖3示出的手術(shù)室監(jiān)控裝置300，因此，該終端400具有和圖3示出的手術(shù)室監(jiān)控裝置300相同的技術(shù)效果，在此不再贅述。其中，監(jiān)控設(shè)備400包括但不限于終端、服務(wù)器以及其他任何具有顯示功能的設(shè)備。以上結(jié)合附圖詳細(xì)說明了本發(fā)明的技術(shù)方案，通過本發(fā)明的技術(shù)方案，能夠提供一種新的手術(shù)室監(jiān)控方式，在將增強(qiáng)現(xiàn)實(shí)技術(shù)引入手術(shù)室之后，可以獲取手術(shù)室的實(shí)時(shí)虛擬與現(xiàn)實(shí)的混合圖像，并將該混合圖像傳輸給輸出設(shè)備進(jìn)行顯示，便于對(duì)手術(shù)過程進(jìn)行全方位的學(xué)習(xí)和監(jiān)控，提升了用戶體驗(yàn)。取決于語(yǔ)境，如在此所使用的詞語(yǔ)“如果”可以被解釋成為“在……時(shí)”或“當(dāng)……時(shí)”或“響應(yīng)于確定”或“響應(yīng)于檢測(cè)”。類似地，取決于語(yǔ)境，短語(yǔ)“如果確定”或“如果檢測(cè)(陳述的條件或事件)”可以被解釋成為“當(dāng)確定時(shí)”或“響應(yīng)于確定”或“當(dāng)檢測(cè)(陳述的條件或事件)時(shí)”或“響應(yīng)于檢測(cè)(陳述的條件或事件)”。需要說明的是，本發(fā)明實(shí)施例中所涉及的終端可以包括但不限于個(gè)人計(jì)算機(jī)(personalcomputer，pc)、個(gè)人數(shù)字助理(personaldigitalassistant，pda)、無線手持設(shè)備、平板電腦(tabletcomputer)、手機(jī)、mp3輸出器、mp4輸出器等。在本發(fā)明所提供的幾個(gè)實(shí)施例中，應(yīng)該理解到，所揭露的系統(tǒng)、裝置和方法，可以通過其它的方式實(shí)現(xiàn)。例如，以上所描述的裝置實(shí)施例僅僅是示意性的，例如，所述單元的劃分，僅僅為一種邏輯功能劃分，實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式，例如，多個(gè)單元或組件可以結(jié)合或者可以集成到另一個(gè)系統(tǒng)，或一些特征可以忽略，或不執(zhí)行。另外，在本發(fā)明各個(gè)實(shí)施例中的各功能單元可以集成在一個(gè)處理單元中，也可以是各個(gè)單元單獨(dú)物理存在，也可以兩個(gè)或兩個(gè)以上單元集成在一個(gè)單元中。上述集成的單元既可以采用硬件的形式實(shí)現(xiàn)，也可以采用硬件加軟件功能單元的形式實(shí)現(xiàn)。上述以軟件功能單元的形式實(shí)現(xiàn)的集成的單元，可以存儲(chǔ)在一個(gè)計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中。上述軟件功能單元存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)中，包括若干指令用以使得一臺(tái)計(jì)算機(jī)裝置(可以是個(gè)人計(jì)算機(jī)，服務(wù)器，或者網(wǎng)絡(luò)裝置等)或處理器(processor)執(zhí)行本發(fā)明各個(gè)實(shí)施例所述方法的部分步驟。而前述的存儲(chǔ)介質(zhì)包括：u盤、移動(dòng)硬盤、只讀存儲(chǔ)器(read-onlymemory，rom)、隨機(jī)存取存儲(chǔ)器(randomaccessmemory，ram)、磁碟或者光盤等各種可以存儲(chǔ)程序代碼的介質(zhì)。以上所述僅為本發(fā)明的較佳實(shí)施例而已，并不用以限制本發(fā)明，凡在本發(fā)明的精神和原則之內(nèi)，所做的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明保護(hù)的范圍之內(nèi)。當(dāng)前第1頁(yè)12當(dāng)前第1頁(yè)12