引言

懸浮3D顯示技術(shù)是一種非常具有發(fā)展前景的顯示技術(shù)，它可以將3D圖像顯示在空中，在一定程度上提升3D圖像的立體感，給觀看者帶來(lái)具有沉浸感和臨場(chǎng)感的3D體驗(yàn)，在醫(yī)療、教育、軍事和娛樂(lè)等方面具有廣闊的應(yīng)用前景。懸浮3D顯示技術(shù)由懸浮顯示技術(shù)和裸眼3D顯示技術(shù)兩部分組成。

懸浮顯示技術(shù)可以將圖像顯示在空中，可以提升圖像的立體感。目前實(shí)現(xiàn)懸浮顯示技術(shù)的方式有很多種，日本大阪大學(xué)提出采用水霧作為承接介質(zhì)，將投影圖像投射在水霧中實(shí)現(xiàn)懸浮顯示，這種設(shè)計(jì)一般應(yīng)用于大尺寸顯示場(chǎng)景，由于水霧的密度不均勻，不穩(wěn)定導(dǎo)致圖像的分辨率很低。韓國(guó)首爾大學(xué)提出采用凸透鏡將集成成像3D顯示器生成的3D圖像進(jìn)行懸浮，該系統(tǒng)實(shí)現(xiàn)懸浮顯示的原理簡(jiǎn)單，能夠?qū)崿F(xiàn)懸浮顯示的基本效果，但是由于凸透鏡的限制導(dǎo)致懸浮圖像的觀看視視場(chǎng)角小，凸透鏡作為懸浮器件結(jié)構(gòu)單一，像差抑制能力很差。日本宇都宮大學(xué)提出采用逆反射膜作為懸浮器件，采用二維LED陣列作為發(fā)光源，生成懸浮的平面圖像。日本早稻田大學(xué)提出采用二面角反射鏡陣列作為懸浮器件，搭建了觀看視角為90°的懸浮顯示系統(tǒng)，該系統(tǒng)有效的擴(kuò)大了懸浮圖像的觀看視角。國(guó)內(nèi)在懸浮顯示方面也有大量的研究，如東超科技研制了負(fù)折射平板透鏡，它可以將物體發(fā)出的發(fā)散光線在空中進(jìn)行再次重新匯聚實(shí)現(xiàn)懸浮顯示。像航科技研制了微通道矩陣光波導(dǎo)平板，開(kāi)發(fā)了無(wú)接觸電梯按鍵等懸浮顯示設(shè)備。

裸眼3D顯示技術(shù)可以分為光柵3D顯示、集成成像3D顯示、全息3D顯示和體3D顯示等。由于集成成像3D顯示可以提供全彩色、全視差、無(wú)視疲勞、無(wú)需佩戴設(shè)備且數(shù)據(jù)量小等優(yōu)勢(shì)被認(rèn)為是目前最具有發(fā)展前景的3D顯示技術(shù)之一。集成成像3D顯示技術(shù)被Lippmann于1908年提出。但是集成成像3D顯示目前仍然存在觀看視角小，分辨率低、景深淺、深度反轉(zhuǎn)等問(wèn)題亟待解決。其中，深度反轉(zhuǎn)問(wèn)題嚴(yán)重制約了集成成像3D顯示技術(shù)的發(fā)展。

1931年，Ives通過(guò)實(shí)驗(yàn)發(fā)現(xiàn)了Lippmann提出的集成成像技術(shù)具有深度反轉(zhuǎn)的問(wèn)題，并提出了兩步記錄法來(lái)解決深度反轉(zhuǎn)的問(wèn)題，該方法把集成成像3D顯示器重建出來(lái)的3D圖像重新作為物體，再利用一個(gè)微透鏡陣列進(jìn)行第二步記錄，這樣再次重建出的3D圖像就具有正確的深度關(guān)系。1978年，Y.Igarish等提出了計(jì)算機(jī)生成集成成像，利用計(jì)算機(jī)來(lái)完成無(wú)深度反轉(zhuǎn)的集成成像記錄。1988年，L.Yang等提出使用兩層傳導(dǎo)屏來(lái)解決深度反轉(zhuǎn)問(wèn)題，其結(jié)構(gòu)與兩步記錄法相似。1998年，J.Arai等采用具有梯度折射率的微透鏡陣列進(jìn)行記錄，以及J.Seo等采用負(fù)微透鏡陣列，都同樣解決了深度反轉(zhuǎn)問(wèn)題。日本廣播協(xié)會(huì)的Okano 等提出通過(guò)將每個(gè)單元圖像繞其中心旋轉(zhuǎn)180°來(lái)顯示深度位置正確的三維場(chǎng)景，但是再現(xiàn)的三維圖像中心深度平面只能位于透鏡陣列后方，無(wú)法實(shí)現(xiàn)浮動(dòng)顯示。韓國(guó)首爾大學(xué)提出使用全息微透鏡陣列光學(xué)元件的相位共軛重構(gòu)技術(shù)，其本質(zhì)上是將單元圖像翻轉(zhuǎn)180°，只是實(shí)現(xiàn)方式不同，只能用虛模式集成成像顯示。西班牙瓦倫西亞大學(xué)提出一種智能深度翻轉(zhuǎn)算法，能夠同時(shí)實(shí)現(xiàn)深度翻轉(zhuǎn)效應(yīng)消除和集成成像采集參數(shù)到顯示參數(shù)的匹配。通過(guò)總結(jié)不難發(fā)現(xiàn)解決集成成像3D圖像深度反轉(zhuǎn)的方法可以分為基于光學(xué)器件和基于計(jì)算機(jī)算法兩類。除了在深度反轉(zhuǎn)問(wèn)題上的研究之外，國(guó)內(nèi)四川大學(xué)在集成成像3D顯示的多視區(qū)顯示和集成成像3D顯示器光線高利用率方面進(jìn)行了研究。

2016年日本宇都宮大學(xué)將基于逆反射膜作為懸浮器件的懸浮顯示技術(shù)與集成成像3D顯示技術(shù)相結(jié)合，搭建了懸浮光場(chǎng)3D顯示系統(tǒng)。該系統(tǒng)將集成成像3D顯示器重建的3D圖像懸浮在空中，有效增強(qiáng)了3D圖像的立體感。2017年中國(guó)科學(xué)技術(shù)大學(xué)提出了基于兩片逆反射膜的懸浮3D顯示系統(tǒng)，該系統(tǒng)有效的提升了3D圖像的懸浮深度和有效觀看視區(qū)。2018年北京郵電大學(xué)采用自由曲面反射鏡與集成成像3D顯示技術(shù)結(jié)合，搭建了懸浮3D顯示系統(tǒng)。該系統(tǒng)有效的降低了由于透鏡畸變引起的圖像失真問(wèn)題，重建出大懸浮深度和高質(zhì)量的懸浮3D圖像。

本文研究基于集成成像的懸浮光場(chǎng)3D顯示系統(tǒng)，該系統(tǒng)由集成成像3D顯示器、半透半反鏡和逆反光膜組成；分析了集成成像3D顯示的工作原理和逆反光膜的懸浮顯示原理；將集成成像3D顯示技術(shù)與基于逆反光膜的懸浮顯示技術(shù)相結(jié)合，解決了集成成像3D圖像深度反轉(zhuǎn)的問(wèn)題，并實(shí)現(xiàn)了3D圖像的懸浮顯示。

1 基本原理

基于集成成像的懸浮3D顯示系統(tǒng)的工作原理如圖1所示，該系統(tǒng)由集成成像3D顯示器、半透半反鏡和逆反光膜組成。集成成像3D顯示器由2D顯示屏和微透鏡陣列組成。傳統(tǒng)集成成像3D顯示存在深度反轉(zhuǎn)的問(wèn)題，這是由于集成成像3D圖像的獲取過(guò)程和3D圖像的重建過(guò)程是鏡像對(duì)稱的，通過(guò)微透鏡陣列獲取得到的微圖像陣列加載在2D顯示屏中，通過(guò)微透鏡陣列重建出3D圖像I。3D圖像I的深度是反轉(zhuǎn)的，3D圖像I中“立方體"位于“圓柱體"的左上方。集成成像3D顯示器發(fā)出的光線經(jīng)過(guò)半透半反鏡的反射到達(dá)逆反光膜，這些光線在經(jīng)過(guò)逆反光膜的反射沿原來(lái)的路徑進(jìn)行通過(guò)半透半反射鏡在空中重建出3D圖像II。集成成像3D顯示器發(fā)出的光線經(jīng)過(guò)逆反射膜的反射將3D圖像懸浮在空氣中，并且對(duì)3D圖像的深度再次進(jìn)行反轉(zhuǎn)，3D圖像II中“立方體"位于“圓柱體"的左下方。該系統(tǒng)使集成成像3D顯示生成的圖像懸浮在空中，并且對(duì)3D圖像的深度進(jìn)行校正。

1.1集成成像3D顯示的基本原理

集成成像包括3D數(shù)據(jù)獲取和3D圖像重建兩個(gè)過(guò)程。集成成像的3D數(shù)據(jù)獲取過(guò)程如圖2(a)所示，該過(guò)程利用一個(gè)微透鏡陣列對(duì)3D場(chǎng)景進(jìn)行成像，并把圖像記錄到位于微透鏡陣列焦平面上的感光成像器件上。微透鏡陣列上的每個(gè)透鏡元從不同的位置和方向記錄下3D場(chǎng)景的部分信息，每個(gè)透鏡元下對(duì)應(yīng)生成的圖像被稱為圖像元。把微透鏡陣列上所有透鏡元下生成的圖像元記錄到一起生成微圖像陣列。集成成像3D圖像的重建過(guò)程如圖2(b)所示，該過(guò)程利用與3D數(shù)據(jù)獲取過(guò)程中的微透鏡陣列具有相同參數(shù)的微透鏡陣列來(lái)重建3D圖像。把微圖像陣列呈現(xiàn)在2D顯示屏上，2D顯示屏上微圖像陣列發(fā)出的光線經(jīng)過(guò)微透鏡陣列的成像功能，根據(jù)光路可逆原理在空間中重建出3D圖像。在早期的實(shí)驗(yàn)中采用針孔陣列來(lái)替代微透鏡陣列，也可以實(shí)現(xiàn)集成成像3D數(shù)據(jù)的獲取和3D圖像的重建。

集成成像3D數(shù)據(jù)獲取過(guò)程3D場(chǎng)景發(fā)出的光線被微透鏡陣列獲取。在集成成像3D圖像重建過(guò)程中，2D顯示屏上微圖像陣列發(fā)出的光線經(jīng)過(guò)微透鏡陣列在空間中重建出3D圖像，3D數(shù)據(jù)的獲取和3D圖像的重建過(guò)程是鏡像對(duì)稱的，在原3D場(chǎng)景中“立方體"位于“圓柱體"的左上方，在重建的3D圖像中“立方體”位于“圓柱體“的右上方。因此導(dǎo)致重建3D圖像的深度是反轉(zhuǎn)的。

圖片

1.2基于逆反光膜懸浮顯示的工作原理

基于逆反光膜懸浮顯示的工作原理圖如圖3所示。3D場(chǎng)景發(fā)出的光線經(jīng)過(guò)半透半反鏡的反射到達(dá)逆反光膜，光線在逆反光膜上進(jìn)行兩次反射之后，出射光線與入射逆反光膜時(shí)的光線是平行的，出射光線透過(guò)半透半反鏡在空間中重建出3D圖像，這樣觀看者就可以觀看到懸浮在空氣中的3D圖像。

逆反光膜是由多個(gè)微三面直角棱鏡排列組成，為了方便分析，這里只討論單個(gè)三面直角棱鏡的成像原理，三面直角棱鏡有三個(gè)等腰直角邊為a的三角形組成，并且三面直角棱鏡的內(nèi)壁是鏡面反射的，三面直角棱鏡的成像原理如圖4所示。設(shè)光線沿ST方向入射經(jīng)T、Q、R點(diǎn)反射后，由RS曚方向出射，設(shè)A1、A2、A3、A4分別為ST、TQ、QR和RS的單位矢量，反射面AOB、BOC和COA的法線單位矢量分別可以表示為

n1=-k                     (1)

n2=-i                     (2)

n3=-j                     (3)

射向反射面AOB的入射光線A1的單位矢量可表示為

A1=-li-mj-nk              (4)

式中，l、m、n為光線A1在x、y、z軸上的方向數(shù)，且l、m和n之間的關(guān)系可以表示為

l2+m2+n2=1               (5)

光線A1經(jīng)AOB面反射后射向反射面BOC，反射光線A2單位矢量可由矢量反射定律決定，因此反射光線A2單位矢量可表示為

A2=A1-2(A1·k)k=-li-mj+nk        (6)

光線A2射向BOC后的反射光線A3的單位矢量可表示為

A3=A2-2(A2 · i)i=li-mj+nk       (7)

光線A3射向COA反射后的光線經(jīng)A4的單位矢量可表示為

A4=A3-2(A3·j)j=li+mj+nk       (8)

通過(guò)對(duì)比式(4)和(8)可知，入射光線與出射光線在x、y、z軸上的方向數(shù)都沒(méi)有發(fā)生變化，只是矢量方向發(fā)生變化，這說(shuō)明入射光線和出射光線是平行的，但是光線的傳播方向是相反的。

根據(jù)以上分析可知，3D場(chǎng)景發(fā)出的光線經(jīng)過(guò)半透半反鏡的反射到達(dá)逆反光膜，逆反光膜可以將光線沿原路進(jìn)行返回在空間中重建出3D圖像，并且重建圖像的深度是反轉(zhuǎn)的。由于逆反光膜是基于光線的反射成像，沒(méi)有光軸也沒(méi)有焦距，因此3D場(chǎng)景與重建的3D圖像的尺寸是1:1的。

1.3 基于逆反光膜的懸浮3D顯示原理

基于逆反光膜解決集成成像3D圖像深度反轉(zhuǎn)的工作原理如圖5所示。將集成成像3D顯示重建的3D圖像替代了原來(lái)的3D場(chǎng)景。集成成像3D顯示器重建出3D圖像I，3D圖像I發(fā)出的光線經(jīng)過(guò)半透半反鏡的反射到達(dá)逆反光膜，光線經(jīng)過(guò)逆反光膜的反射在半透半反鏡前再次重建出3D圖像Ⅱ。由于逆反光膜生成的圖像與3D場(chǎng)景是1:1大小的，并且在深度上是反轉(zhuǎn)的。因此經(jīng)過(guò)逆反射膜重建的3D圖像Ⅱ與集成成像3D顯示器重建的3D圖像I是等大的、鏡像對(duì)稱的，并且3D圖像Ⅱ與3D圖像I在深度上是反轉(zhuǎn)的。集成成像3D顯示器重建的3D圖像I與原3D場(chǎng)景在深度上反轉(zhuǎn)的。如圖2所示，在3D場(chǎng)景中“立方體"位于“圓柱體"的左上方，經(jīng)過(guò)集成成像3D顯示重建的3D圖像I中，“立方體"位于“圓柱體"的右上方，深度上是反轉(zhuǎn)的。將集成成像3D顯示器平放，重建的3D圖像I中“立方體"位于“圓柱體"的左上方，經(jīng)過(guò)逆反射膜的再次成像重建出3D圖像Ⅱ，在3D圖像Ⅱ中“立方體"位于“圓柱體"的左上方，因此集成成像3D顯示的深度被得到校正。觀看者看到的3D圖像Ⅱ的深度與原3D場(chǎng)景的深度是一致的。

2D顯示屏上的微圖像陣列與微透鏡陣列精密耦合重建出3D圖像，2D顯示屏發(fā)出的光線被微透鏡陣列進(jìn)行調(diào)制，使顯示屏發(fā)出的光線被控制在3D圖像的觀看視角內(nèi)，如圖6所示。根據(jù)集成成像3D圖像的看視角公式θ=2arctan(p/2g)，其中p為微透鏡陣列的節(jié)距，g為微透鏡陣列到顯示屏之間的距離，可知3D圖像的觀看視角為11.5°。2D顯示屏與微透鏡陣列之間的縫隙用黑色材料進(jìn)行封裝使顯示屏發(fā)出的光線不會(huì)直接到達(dá)半透半反鏡和逆反光膜，避免了其它串?dāng)_光線對(duì)3D圖像的影響。

假設(shè)理想狀態(tài)下顯示屏發(fā)出的光線全部經(jīng)過(guò)微透鏡陣列，并且不會(huì)被微透鏡陣列吸收。光線經(jīng)過(guò)半透半反鏡時(shí)，有50%的光線到達(dá)逆反光膜。逆反光膜的反射效率≥90%，光線再次經(jīng)過(guò)逆反光膜的反射，只有45%的光線沿入射時(shí)的方向進(jìn)行反射。反射光線透過(guò)半透半反射鏡被人眼看到，最終光線的利用率僅有22.5%，如圖7所示。

基于逆反光膜的集成成像懸浮光場(chǎng)3D顯示，可以將集成成像3D顯示器重建的3D圖像進(jìn)行懸浮，解決集成成像3D圖像深度反轉(zhuǎn)的問(wèn)題，3D圖像的觀看視角不會(huì)受到影響，但是3D圖像的亮度被大幅度的降低。

2 實(shí)驗(yàn)

基于集成成像的懸浮3D顯示系統(tǒng)實(shí)驗(yàn)裝置如圖8所示，該系統(tǒng)由集成成像3D顯示器、半透半反鏡和逆反光膜組成。其中集成成像3D顯示器由iPhone13Pro的手機(jī)屏來(lái)顯示微圖像陣列，顯示屏幕的分辨率為2532暳1170，像素點(diǎn)尺寸為55.2毺m。采用的微透鏡陣列中微透鏡元的節(jié)距為1.5mm，焦距為7mm。

在3Dmax中創(chuàng)建3D場(chǎng)景，3D場(chǎng)景包含“1"和“2"兩個(gè)物體，“2"位于“1"的右前方。其中“1"位于虛擬相機(jī)陣列的聚焦面后5cm的位置，“2"位于虛擬相機(jī)陣列的聚焦面前5cm的位置，虛擬相機(jī)陣列聚焦在坐標(biāo)系的零點(diǎn)，如圖9所示。在3Dmax中創(chuàng)建虛擬相機(jī)陣列，獲取不同位置的視差圖，采用像素映射算法生成實(shí)驗(yàn)所需要的微圖像陣列，如圖10所示。

圖9創(chuàng)建3D場(chǎng)景獲取微圖像陣列

圖10微圖像陣列

采用傳統(tǒng)集成成像3D顯示器重建的3D圖像如圖11所示。依次從左到右獲取重建3D圖像五個(gè)不同視點(diǎn)的視差圖。在原3D場(chǎng)景中“2"位于“1"的右前方，根據(jù)遮擋關(guān)系，當(dāng)從左到右觀看原3D場(chǎng)景時(shí)，“1"和“2"之間的距離應(yīng)該是依次減小。通過(guò)觀察圖10的實(shí)驗(yàn)結(jié)果，發(fā)現(xiàn)從左到右的觀看重建的3D圖像時(shí)，“1"和“2"之間的距離依次變大，因此傳統(tǒng)集成成像3D顯示器重建的3D圖像存在深度反轉(zhuǎn)的問(wèn)題。

圖11傳統(tǒng)集成成像3D顯示效果

圖12基于集成成像的懸浮3D顯示效果

基于集成成像的懸浮3D顯示系統(tǒng)的3D顯示效果如圖12所示。依次從左到右獲取重建3D圖像五個(gè)不同視點(diǎn)的視差圖。從左到右觀看重建的3D圖像時(shí)，“1"和“2"之間的距離依次減小，它們的遮擋關(guān)系與原3D場(chǎng)景的遮擋關(guān)系是一致的。因此，基于集成成像的懸浮3D顯示系統(tǒng)可以有效的消除集成成像3D圖像的深度反轉(zhuǎn)問(wèn)題，并且基于集成成像的懸浮3D顯示系統(tǒng)可以將3D圖像懸浮在空間中，實(shí)現(xiàn)3D圖像懸浮顯示。

3 結(jié)論

本文提出基于集成成像的懸浮3D顯示系統(tǒng)，該系統(tǒng)由集成成像3D顯示器、半透半反鏡和逆反光膜組成。分析了集成成像3D顯示的工作原理和逆反光膜的懸浮顯示原理。逆反光膜可以將光線以入射的方向反射回去再次成像。因此將集成成像3D顯示技術(shù)與基于逆反光膜的懸浮顯示技術(shù)相結(jié)合，集成成像3D顯示器發(fā)出的光線經(jīng)過(guò)半透半反鏡的反射到達(dá)逆反光膜，逆反光膜將光線以入射的角度進(jìn)行反射并重新重建出3D圖像，在實(shí)現(xiàn)3D圖像懸浮顯示的同時(shí)也解決了集成成像3D圖像深度反轉(zhuǎn)的問(wèn)題，3D圖像的觀看視角不會(huì)受到影響，但是3D圖像的亮度被大幅度的降低。在接下來(lái)的研究中擬引入偏振光來(lái)提升3D圖像的亮度。該系統(tǒng)為懸浮3D顯示提供新的理論依據(jù)，為解決集成成像3D圖像深度反轉(zhuǎn)提供新的方法。