讓你跟名人藝術(shù)肖像“神配對”后,Google 讓 AI 分類雜志陳年舊照去了
利用 AI 技術(shù),Google 在藝術(shù)畫作上做了很多有趣而實(shí)用的探索。
今年 1 月份,Google 推出了一款人臉自拍照匹配著名人物肖像畫作的“Arts & Culture(藝術(shù)與文化)”APP,一時風(fēng)靡社交媒體,人們都樂于曬出由機(jī)器為自己配對的自以為很像的名人肖像,還在旁邊給出了相似度。
有些匹配效果看起來還不錯,但有些就不一樣了,雷鋒網(wǎng)瀏覽了一些圖片發(fā)現(xiàn),它會給小孩自拍匹配一個大叔照,給女性的自拍匹配一個男性畫作,但萬萬沒想到居然還有下面這種:
?
三個字道出了這位大哥內(nèi)心的控訴,砍人倒不至于,但一怒之下投訴這款 APP 估計是沒跑了。
APP背后的技術(shù)即是計算機(jī)視覺,雖然你可能會感覺用在上面太不靠譜了,但考慮到由于樣本數(shù)據(jù)不足等方面的因素,是可以理解的,更重要的是,這款A(yù)PP本來也是為了給人們帶來樂趣的。
利用“Arts & Culture(藝術(shù)與文化)”APP 背后類似的 AI 技術(shù),Google 為《生活》雜志所做的工作就有效實(shí)用多了。這本雜志的攝影師在 1936 年至 1972 年間拍攝了大量最具代表性的圖像,并留下了大約 650 萬張照片的存檔。不過,當(dāng)時并沒有技術(shù)條件能對這些照片這些整理分類,這對要從大量圖片中搜尋它的人來說并不容易。
那 Google 做了什么呢?一句話來說就是,它利用人工智能技術(shù)對《生活》雜志這些圖片做了很多標(biāo)簽進(jìn)行分類,重新制作了一個新的、可搜索的照片存檔。
官方對此進(jìn)行了更加詳盡的解釋,這些標(biāo)簽使用了機(jī)器學(xué)習(xí)將超過 400 萬張來自圖像組成了交互式的“百科全書”。對于這個項目,他們使用了 Google 基于圖像內(nèi)容注釋算法(ICA)來生成基于圖像像素的標(biāo)簽。而基于 Google 圖片搜索中使用的深度神經(jīng)網(wǎng)絡(luò),可以識別標(biāo)簽和圖片類別。
他們使用了近鄰算法將標(biāo)簽聚合成不同類別,從而根據(jù)圖像特征向量就能找到相關(guān)標(biāo)簽,這些標(biāo)簽有男士、手套、鍵盤、百米跨欄等等。ICA 算法為每個圖像提供了數(shù)字信息,他們將其轉(zhuǎn)換為關(guān)鍵字,并進(jìn)行比較和分組。而每張圖片也都有多個標(biāo)簽鏈接到被識別的元素,從而讓人們易于通過瀏覽圖像類別和標(biāo)簽輕松瀏覽《生活》雜志的存檔。
不過,目前來看,技術(shù)的表現(xiàn)情況也不怎么理想,比如有的標(biāo)簽標(biāo)記除了插座,而且許多有用的分類標(biāo)簽丟失了,包括攝影師姓名,日期以及每張照片中出現(xiàn)的人,加載速度相對也比較慢,但這些情況隨著對技術(shù)的更迭可能也會得到改善。
除了為圖片添加標(biāo)簽之外,Google 還推出了一項名為“Art Palette(藝術(shù)調(diào)色板)”的功能,它也可在網(wǎng)絡(luò)或 Arts & Culture APP 中使用。雷鋒網(wǎng) (公眾號:雷鋒網(wǎng)) 從其官網(wǎng)介紹中看到,由于無論從網(wǎng)絡(luò)中還是室內(nèi)設(shè)計,配色方案在用戶體驗(yàn),建立品牌標(biāo)識和溝通情緒方面發(fā)揮著重要作用,所以 Google 才會想到利用 AI 技術(shù)去研究藝術(shù)中的調(diào)色板。
藝術(shù)調(diào)色板相當(dāng)于一個搜索引擎,可根據(jù)你選擇的調(diào)色板來查找藝術(shù)作品。使用這個工具,你可以比較梵高畫的鳶尾花中的五種顏色是不是與 16 世紀(jì)莫奈畫的睡蓮有關(guān)。這對于設(shè)計師和藝術(shù)家們或者普通的藝術(shù)愛好者們來說,在他們的創(chuàng)作中可能會提供有趣的靈感。
對了,還有一個叫 MoMA 的工具。
紐約現(xiàn)代藝術(shù)博物館為其展覽拍照可追溯到 1929 年,現(xiàn)在大約有超過 30,000 張照片,靠人力來識別這些舊展覽照片中的藝術(shù)作品是個不小的挑戰(zhàn),現(xiàn)在 Google Arts&Culture 和 MoMA 的數(shù)字媒體團(tuán)隊使用機(jī)器學(xué)習(xí)和計算機(jī)視覺技術(shù)做出的?MoMA?工具可以自動識別出每張照片中的作品,并將圖片變成博物館展覽時的互動檔案。
現(xiàn)在,將博物館中的這些展覽圖片與他們在線收藏中的超過 65,000 件作品進(jìn)行配對,目前可以識別出其中 27,000 多件作品,并且他們使用這些結(jié)果創(chuàng)建了數(shù)千個展覽歷史與在線收藏之間的新鏈接。盡管現(xiàn)在來看這個結(jié)果并不全面,但鑒于所涉及的大量信息內(nèi)容,這至少也是一個不錯的開始。?
我們或許還可以期待Google 利用 AI 在藝術(shù)類項目中做更多類似有益的探索。
*雷鋒網(wǎng)報道
。
