廣東| 茂港| 東鄉| 合肥| 門頭溝| 清原| 八宿| 蘇尼特右旗| 漣源| 巫溪| 金溪| 柳州| 克什克騰旗| 湘潭市| 浙江| 息烽| 錦州| 布爾津| 渭源| 二道江| 延安| 永州| 岳普湖| 哈爾濱| 云林| 維西| 雙柏| 石河子| 天水| 井陘礦| 扎蘭屯| 延壽| 東陽| 上高| 宣化區| 海滄| 和碩| 館陶| 海興| 平樂| 戶縣| 牙克石| 應縣| 新晃| 九龍| 零陵| 興和| 木蘭| 新蔡| 英德| 仙桃| 鎮平| 遂溪| 蓮花| 且末| 恩平| 興城| 雙流| 乃東| 涿鹿| 文昌| 永寧| 甘洛| 郴州| 廣平| 盧氏| 金鄉| 長樂| 阿瓦提| 東至| 舒城| 臨澤| 旬邑| 鄂托克前旗| 德化| 福州| 五峰| 新賓| 監利| 鶴慶| 古田| 正寧| 石嘴山| 雙橋| 監利| 牙克石| 浦東新區| 黃島| 欽州| 興和| 全椒| 天等| 興海| 達爾罕茂明安聯合旗| 岑鞏| 洋縣| 紹興市| 平度| 房縣| 潘集| 昌黎| 靖邊| 沙縣| 阿瓦提| 許昌| 昂仁| 霸州| 博野| 岳池| 宜秀| 石龍| 金鄉| 東阿| 廈門| 洪雅| 嵩縣| 鐘山| 碌曲| 興義| 撫順縣| 云縣| 保靖| 恩施| 巴塘| 中寧| 樅陽| 旬邑| 五原| 田東| 撫松| 水城| 大荔| 香河| 霍邱| 烏蘭| 寶豐| 奉新| 來安| 瀏陽| 麥蓋提| 青岡| 革吉| 襄樊| 杜爾伯特| 朝陽縣| 烏魯木齊| 石渠| 澳門| 桂平| 日土| 扎囊| 峰峰礦| 合陽| 惠農| 巴里坤| 江陵| 昭蘇| 黃埔| 泰順| 建陽| 武鳴| 肥東| 進賢| 鹽亭| 惠陽| 龍川| 通榆| 西青| 臺北市| 正安| 烏拉特后旗| 行唐| 鐘山| 阿合奇| 天津| 金州| 榮昌| 陳巴爾虎旗| 樂清| 嘉定| 北碚| 樺川| 開陽| 嘉興| 上海| 大安| 懷柔| 肇州| 察哈爾右翼中旗| 建寧| 宣恩| 杜集| 巨鹿| 新晃| 江源| 呼蘭| 海城| 龍巖| 路橋| 紅河| 襄樊| 安澤| 武清| 沁陽| 安塞| 澠池| 沾益| 冷水江| 汾西| 麻栗坡| 城口| 馬關| 射洪| 息縣| 通許| 大新| 巴林左旗| 呼倫貝爾| 鳳山| 元壩| 沙圪堵| 開魯| 鐵山| 彬縣| 魯甸| 墨玉| 雅安| 邗江| 崇明| 大名| 云南| 沭陽| 科爾沁左翼后旗| 衛輝| 彭水| 固鎮| 石龍| 惠安| 攸縣| 遼陽縣| 五蓮| 保亭| 舟曲| 阿圖什| 寶坻| 長安| 陽泉| 漠河| 豐順| 始興| 肥東| 新泰| 南木林| 政和| 山西| 宜賓縣| 濟陽| 焉耆| 黟縣| 達孜| 萊州| 大豐| 滿城| 翠巒| 网页百家乐游戏

<big id="cp7ph"><menuitem id="cp7ph"></menuitem></big>

      您當前位置:科技 > VR/AR

      周末薦讀 | 憑單攝完虐iPhone Xs,揭秘谷歌相機夜視功能

      2018-11-30     來源:網易智能
      標簽:不樂 澳門新濠天地官網 獨李鎮

      本文轉載自AI科技大本營(ID:rgznai100),作者:Marc Levoy、Yael Pritch,譯者:劉旭坤


      【導讀】隨著智能手機的不斷發展成熟,為了尋找差異化的廠商不斷增加攝像頭的數量。然而,攝像頭的數量越多,就代表拍照的質量越好嗎?

      Google Pixel 手機一直堅持單攝,雖然硬件不算頂尖,但是憑借著強大的算法,Pixel 手機的照相水平非常突出。上個月,Pixel 3發布會的 Keynote 顯示其暗光拍照的成像效果甚至完虐 iPhone XS,讓人驚嘆不已。

      近日,Google 又為自己的相機應用增加了“Night Sight”功能(夜視功能),用戶無需三腳架和閃光燈就能在夜間拍出銳利干凈的照片,并獲得了眾多評測博主的好評。本文就將為讀者介紹弱光條件下拍照的難點以及機器學習在這一問題中的應用。

      01.弱光拍攝的難點

      大家如果在夜晚拍過照片的話,肯定會發現拍出的照片上有很多噪點,使得照片看起來顏色和亮度都很不均勻。噪點或者叫噪聲的來源有兩個:散粒噪聲和讀取噪聲。散粒噪聲指進入感光元件的光子數量太少造成可觀測的光子數量不均。散粒噪聲的出現與我們所使用感光元件的質量沒有關系,不過智能手機的感光元件太小,所以受散粒噪聲影響比普通相機更大。讀取噪聲則是由將電信號轉換成讀數時的隨機錯誤造成的。感光元件的質量越好那么讀取噪聲也就越小。

      把所有噪聲的來源都考慮進去我們可以得出一個信噪比,信噪比越高則意味著我們拍出的照片質量越好。感光元件大小不變的情況下信噪比和曝光時間成正比,所以看來只要練成鐵手就能完美地解決這個問題。然而還是想簡單了,就算拍攝者能長時間穩穩地舉著手機被拍的對象也沒法保持長時間不動。

      2014年發布的 HDR+ 功能改善了散粒噪聲和讀取噪聲的問題,不過 HDR+ 的本意如它的名字一樣是為了提高照片的動態范圍。HDR+ 的原理是連拍很多張照片,然后通過圖像識別把多張照片進行疊加成一張照片。每張照片的曝光時間能根據用戶手抖的程度和拍攝目標的移動自動調節來保證照片的銳度,這樣就在保證銳度的前提下增加了曝光時間,所以照片的信噪比也能提高了。

      看起來弱光拍照的問題已經完美解決了,就連拍幾十張后合并成一張就行了。然而實際的情況是就算用多張照片合并的方法還是對光照有要求,光照低于一定的標準就算再多拍效果也不好。標示光源亮度的物理量是光通量,它的單位是流明。單位面積接收到的光通量叫做照度,單位是勒克斯。他們之間的關系大家可以參照壓力與壓強的關系來理解。為了讓大家能直觀地了解不同勒克斯的概念,下面表中用生活中的場景與勒克斯數值做了對比:


      普通的手機相機從30 勒克斯開始就不太行了,如果使用 HDR+ 或者類似合成多張照片的技術大概能降到3 勒克斯但再低也就不行了。我們開發夜視功能的目標是讓手機在 0.3 到 3 勒克斯之間不補光只按一次快門也能拍出好照片,而要實現這一目標最重要的手段就是盡可能多地捕獲光子。

      02.曝光時間限制和模糊問題

      延長曝光時間雖然能提高信噪比拍出更干凈的照片,但也同時帶來了兩個問題。Pixel 手機默認的拍攝模式是零快門延遲,意思是說用戶一打開相機應用其實相機就開始拍照存儲在緩存里了。當用戶按下快門的時候手機會提取最新拍攝的 9 至 15 張相片來進行合成,這樣就能保證拍到的是用戶按快門的那一刻。

      用戶在拍照時手機會顯示預覽,為了維持最低 15 幀的顯示刷新,HDR+ 能實現的最慢快門速度也只有 66 毫秒。所以為了進一步延長曝光時間,夜視功能改變了拍攝模式。用戶使用夜視功能拍照時按下快門后相機才會開始拍攝,所以用戶必須維持一小段時間盡量不動。

      延長曝光帶來的第二個問題是畫面模糊。雖然 Pixel 2 和 Pixel 3 配備了光學防抖鏡頭但最多只能支持到 1/8 秒快門。Pixel 3 為了解決這一問題應用了所謂的動作測量技術,也就是使用光流法來判斷畫面的移動,然后再動態調整快門速度來讓畫面盡量清楚。Pixel 1 ?和 Pixel 2 雖然不會默認使用動作測量,不過用戶開啟夜視模式時它們也會使用動作測量。這樣如果用戶畫面晃動不大的話每張照片的曝光時間最多能到 333 毫秒。這項技術也針對 Pixel 1 和使用了腳架的情況進行了優化。Pixel 1 沒有光學防抖,所以快門的時間就稍微短一些而如果手機完全沒有移動的話快門時間最高可達一秒。

      除了快門時間,應用也會根據情況調整所拍的照片張數來減少用戶等待的時間。如果使用三腳架只拍 6 張就可以合成了,若為手持則最多會拍 15 張。所以使用 Pixel 手機拍照,根據相機是前置還是后置、手持穩定性、畫面穩定性和亮度的不同,合成前所拍攝的照片在 15 張 1/15 秒快門照片和 6 張 1 秒快門的照片之間。下面的圖中我們可以看到一點區別:


      左圖我們可以看到狗頭部的動作。中間圖為動作測量關閉狀態下拍攝,快門為 73 毫秒,能明顯看到模糊。右圖為動作測量開啟狀態下拍攝,快門為 48 毫秒,比關閉動作測量清楚一些。

      下面的圖是手持和三腳架拍攝的不同效果:


      左圖為手持拍攝,略微有抖動。拍攝了 15 張快門 333 毫秒的照片進行合成。右圖為手機判斷無抖動所以拍攝了 6 張快門 1 秒的照片進行合成。

      03.對齊與合成

      拍攝多張照片進行合成不是什么新鮮的方法,在天文和微距攝影上都有很廣泛的應用。雖然原理聽起來很容易,但將手持拍攝的照片對齊就很困難。我們從 2010 年就開始進行對齊與合成相關的研究,最早的成果是 iOS 平臺一個叫做 Synthcam 的應用。

      夜視功能的原理其實和 Synthcam 差不多,但提高了照片的分辨率。Pixel 1 和 2 中使用的 HDR+ 融合算法提高了剔除無效照片的能力,Pixel 3 中使用的超高分辨率變焦技術雖說并不是為減少噪點所開發但客觀上也實現了除噪點的效果。這項技術某些條件下效果優于 HDR+ 但對計算能力要求更高,所以沒有應用在 Pixel 1 和 Pixel 2 上。

      04.其他難題

      原理聽起來挺簡單,但開發夜視功能的過程中還是碰到了不少難題。

      |1.弱光條件下自動白平衡失效

      自動白平衡的目的是將不同色溫條件下拍攝的照片都調整為白光下拍攝的顏色,否則人眼在回看照片時會發現明顯的色差。

      白平衡在數學上屬于不適定問題。比如感光元件判斷拍到的雪花是藍色的,但無法判斷雪花到底是真的藍還是天的藍色映在雪花上。現在的自動白平衡算法在強光條件下效果不錯,但在弱光拍攝時就非常不準了。

      為此我們訓練了一個模型來判斷照片的白平衡是否正常并作出矯正。為了訓練這個模型我們使用 Pixel 手機在各種光照條件了拍了很多照片并手工對白平衡進行調整。下圖中我們能看到應用模型前后的明顯區別。


      |2.色調映射

      人眼在弱光下是分不清楚顏色的,因為只有不能判斷顏色的視桿細胞才能在晚上工作。但人眼看不到并不表示到晚上顏色就沒有了,所以夜視功能想超越人眼的極限必須在夜間也能拍出清晰的顏色。

      下面這張圖就是在夜間通過長時間曝光所拍攝的(注意天空中可以看到星星)。雖然偶爾拍拍這種把晚上拍成白天的效果也不錯,但恐怕大家還是想能把晚上拍成晚上。


      其實藝術家們很早就發現了讓觀眾感覺所畫的是夜間的方法,如下圖所示:


      畫家提高畫面的對比度并把陰影部分直接涂黑來營造出夜間的效果。我們也使用了類似的方法,比如使用 S 形色調映射。不過怎么把握其中的度還是挺值得思考的,下面這張用 Pixel 3 拍的照片就非常成功:


      05.夜視模式的極限

      當照度低于 0.3 勒克斯時手機的自動對焦功能會失效,所以我們在 Pixel 3 的夜視模式增加了兩個手動對焦按鈕:近和遠。近模式的對焦距離約為 1.2 米,遠模式則在約 3.6 米處對焦。在遠模式下景深是從 1.8 米到無窮遠。雖然照度低于 0.3 勒克斯也能拍出好照片,但就必須借助三腳架和第三方應用了。

      那么理論上對攝影來說照度能低到什么程度呢?我想當捕捉到的光子會受到讀取噪音影響時就差不多了。另外還有其他的噪聲來源,比如受溫度影響的暗電流,不過我可不建議大家為了降噪點把手機泡到液氮里。就算這些問題全都解決了也會有風吹樹搖,超長曝光攝影還是很困難。

      06.注意事項

      用夜視功能拍照很有趣,如果使用得當的話能夠拍出效果非常好的照片。夜視功能在 Pixel 3 上面的效果是最好的,一方面是因為它芯片速度最快,另外自動白平衡算法也是以 Pixel 3 為基礎訓練的。不過就算用的不是 Pixel 3 夜視功能也能讓你在弱光下拍出好照片(預覽里的噪點并不會出現在完成的照片上)。文章最后就給大家一些更好地使用夜視功能的注意事項吧:

      完全黑暗的地方夜視功能也拍不到什么東西柔和均勻的光照條件下拍攝效果更好不要對著光源拍,否則會有炫光可以點預覽屏幕來調整曝光如果是單純地想降低曝光是可以通過軟件后期實現的,而且沒那么多噪點對著畫面上有顏色或者亮度對比的地方比較容易自動對上焦還是對不上焦就試試手動對焦(如下圖)靠著墻可以增加手持的穩定性有助于提升照片銳度用前置鏡頭自拍也可以用夜視功能,而且手機屏幕還能補光




      【免責聲明】本網站發布的資料部分來源于互聯網,轉載的目的在于傳遞更多信息及用于網絡分享,并不代表本站贊同其觀點和對其真實性負責,也不構成任何其他建議。本站部分作品是由網絡投稿和發布、編輯整理上傳,對此類作品本站僅提供交流平臺,不為其版權負責。如果您發現網站上有侵犯您的知識產權的作品,請與我們取得聯系,我們會及時修改或刪除。

      返回科技網首頁>>


      文章關鍵字: 憑單  夜視  周末

      本頁地址:http://www-kejiwang-cn.zydelec.com/tech/VRAR/20181126/1568591.html
      熱門點擊:
      • 雀巢推出“小Ai”智能音箱 主打家庭營養健康
        雀巢推出“小Ai”智能音箱 主打家庭營養健康

        網易智能|2018.10.29

        【網易智能訊 10月26日消息】今天,雀巢在京舉行“雀巢中國創新日”活動,展示多款創新項目,并推出第二代家庭營養健康助手“小Ai音箱”。據了解,第二代升級版雀巢小Ai增加了30萬條營養健康內容,;推出個性化多重智能互動體驗,如定制化營養食譜和熱量計算等;推出雀巢商品語音購物渠道。此外,雀巢于年初創立創新孵化器團隊,今天,雀巢正

        熱度:
        熱度:

      • 拜騰CEO畢福康:智能電動汽車將帶來商業模式巨變
        拜騰CEO畢福康:智能電動汽車將帶來商業模式巨變

        網易科技報道|2018.11.09

        11月8日,網易科技、網易智能烏鎮現場報道第五屆世界互聯網大會進入第二天,在物聯網分論壇上,拜騰聯合創始人兼CEO畢福康發表了演講。“汽車行業正在發生三個變化,第一個是電動化,第二是互聯化,第三是自動駕駛。目前,汽車電動化在不斷發展,也正在變得越來越智能,這意味著將有新的產品出現,不僅是新產品,而且有新的商業模式。”畢福康說到

        熱度:
        熱度:

      • 雷軍:語音助手給物聯網帶來了巨大革命
        雷軍:語音助手給物聯網帶來了巨大革命

        網易科技報道|2018.11.09

        11月8日,網易科技、網易智能烏鎮現場報道第五屆世界互聯網大會進入第二天,在物聯網分論壇上,小米集團董事長兼CEO雷軍發表了演講。雷軍說,在過去的幾年里,上千家的人工智能創業公司覆蓋了十多個行業和領域,最重要的一個產品是智能音箱,也可以說語音助手給物聯網設備帶來了巨大的革命。雷軍表示,小米兩三年前就投入了語音助理和智能音箱的研

        熱度:
        熱度:

      仁壽鎮 聯邦城 新光大廈 福山 強頭
      楊柳青鎮前桑園村 杜鵑路 路北滘站 文慧橋北 寶豐鎮
      幾內亞 上沙河 張林 高坪鄉 莫拐農場
      鄉政府 車江鎮 金頂北路東口 石獅市打私辦 遮放鎮
      永利赌场平台 澳门巴黎人平台 賭博網站大全 新濠天地博彩官网 信譽賭博網站
      澳門永利賭場 澳門威尼斯人正網 澳门最大的赌场 澳门新濠天地赌场网站 澳門巴黎人官網
      克隆俠蜘蛛池 http://www.kelongchi.com/ 贵州快3开奖结果统计

      <big id="cp7ph"><menuitem id="cp7ph"></menuitem></big>

        <big id="cp7ph"><menuitem id="cp7ph"></menuitem></big>