編者按：隨著圖像識別技術的不斷發展，視覺搜索也愈加被人所重視，它會造就下一個谷歌嗎？近日，FastCodesign發布了一篇文章，介紹了該領域Pinterest近年來的發展狀況及其背后的潛力與野心。作者為MARK WILSON，文章由36氪編譯。
一、
這一切都從16個月前一個牛油果開始的。
在Pinterest位于舊金山的總部，一個特殊的牛油果被放置在會議室的桌子上。Pinterest的創意總監Albert Pereta被六名同事簇擁著，走近水果，小心翼翼地用手機瞄準拍攝。他正在測試該公司的最新發明，這是一項名為“Lens”的功能。如果測試正確，它不僅能識別出這種水果，還能搜索過去7年里上傳至該服務的數十億張照片，以尋找類似的圖片。
Pereta拍下照片后，應用花了一會兒時間與云同步，然后把結果反饋出來。Pereta的手機屏幕上充滿了看似無窮無盡的、從各個角度拍攝的牛油果。
“很多人都很驚嘆，說‘這東西真好！’”Pereta說道。Pinterest已經能夠通過視覺線索識別出了一個物體，這是一個非常困難的工程問題。但Pereta并不滿意：“當我看著這個結果的時候，我在想，‘誰在乎呢？’”
視覺搜索技術的效果非常好，但其結果毫無意義。沒有人會拍下牛油果的照片，希望能得到一幅幾乎完全相同的牛油果照片，更不用說無窮無盡的照片了。“我們開始問，‘如果你給一個牛油果拍照，你想要什么？’”Pereta回憶道。有人說他想要一份食譜。“所以你甚至不會看到牛油果，你會看到一些粘乎乎的牛油果醬，”Pereta說。或者Pinterest可以提供關于如何種植牛油果的信息，或者你可以用牛油果做些什么。“那太不可思議了，”Pereta回憶說。
如今，牛油果的故事已經成為了一個寓言，安放在Pinterest總部的膠合板墻內。這提醒人們，個性化比完美更有價值。隨著該公司在去年2月推出Lens Beta版測試工具，深入到新興的視覺搜索領域時，這一點尤為明顯——這個版本并沒有調用成千上萬的牛油果圖片。結合Pereta的見解，這款應用能夠提供與它們相關的想法，比如，制作牛油果醬。這是一個早期的視角，即Pinterest在非常現實的情況下，如何將希望寄托在視覺人工智能上，從而徹底改變人們購物和飲食方式的一切行為。
二、
在過去的二十年里，我們通過在搜索欄中輸入信息來尋找網絡上的東西。由于機器學習技術的進步，計算機視覺即將讓我們通過拍照來進行搜索。谷歌、Facebook、微軟和亞馬遜都在向這項技術投入大量資源。這也就不足為奇了：谷歌將在2017年通過傳統文本搜索廣告獲得約286億美元的收入。使用Alexa、Siri和Google Assistant等服務的語音搜索功能，現在才剛剛實現。視覺搜索呢？這可能是一件具有里程碑意義的事情，因為許多技術專家都設想未來的智能手機不會出現在我們的口袋里，而是在我們的眼睛里。
Pinterest首席執行官Ben Silbermann表示：“我真的認為，攝像頭將成為下一個鍵盤。它將成為你用來查詢周圍世界、發現身邊事物、或想象某個東西可能適合你生活的一個基本工具。”
在這個競爭激烈的領域，Pinterest看起來并不算什么。但其在那堆牛油果下隱藏了很多東西。當各種黨派之爭的內容占據了許多應用和網站的時候，Pinterest的2億月活躍用戶就會轉向該服務，從而尋求一種更美好的生活，比如更舒適的客廳、冒險的旅行，或者健康的零食。根據尼爾森的一項研究，他們不是在尋找美食照片，也不一些能夠發到Instagram上的照片，而是他們可以真正烹飪的日常食物：98%的Pinterest用戶表示他們會嘗試在該服務中發現的新東西。廣告商們也開始接受這個網站。從2015年到2017年，Pinterest的年營收預計將增長5倍，達到5億美元，而其在全球范圍內的用戶增長將達到40%。（Pinterest拒絕就營收增長和預測發表評論。）
Ben Silbermann。
Pinterest的受歡迎程度在于，它能夠為每一位用戶創建一個獨特的“品味圖譜”，從而推斷出其可能感興趣的其他東西。現在，Pinterest正致力于將計算機視覺技術融入到對用戶偏好的深入理解中。“所有的東西都在不斷涌現，這是Pinterest在為你的實際生活尋找創意時的有用之處，”Silbermann說。“如果人們真的用Pinterest來決定他們在家里做的所有事情，比如他們準備烹飪的食物，或者是他們的下一個假期等等，那就會有巨大的價值。”這意味著Pinterest不僅需要像谷歌一樣掌握你正在尋找的東西，還必須預測你永遠不知道的，但你想要的東西。如果這家公司取得成功，它可以利用我們的相機開啟一個無窮無盡的個人發現世界。Pinterest聯合創始人Evan Sharp表示：“視覺搜索能產生的持久影響不會是什么特定的產品或功能，而是它讓人們能夠做的事情：將人們看到的任何東西，變成可以用來在互聯網上發現更多東西的東西。”
三、
我站在舊金山SOMA社區的一間花園公寓里拿出了Pinterest應用。即便是在地下室的照明設備中，鏡頭也能很好地工作，將我拍攝的物體與其突出的特征匹配起來。鏡頭不僅能看到一把椅子，還能看到是一把俱樂部的椅子。不僅僅是一個枕頭，還是一個kilim枕頭。不僅僅是“藝術”品，還是一幅Rothko的畫作。通過這個過程，我實際上學到了許多東西。許多識別結果伴隨著的都有可操作的鏈接，我可以用它來標記、甚至購買。
后來，我嘗試通過Google Lens拍攝類似的照片，這是Pinterest的一個競爭對手，在今年早些時候在Pixel手機上推出了測試版。谷歌的版本不知道它看到了一把椅子，甚至是家具，并向我道歉。它甚至誤把枕頭當作被子。它唯一能與之匹配的是Rothko的作品，不過值得注意的是，人們普遍認為，識別2D藝術品是視覺搜索工具最簡單的挑戰之一。
Google Lens不是很好。至少現在還沒有很好。但你可以看到，視覺AI是如何與公司的更大的業務需求以及其他科技巨頭相結合的。谷歌的業務是建立索引，因此該公司希望幫助用戶直觀地識別周圍的世界，這是有道理的。Facebook有自己的社交圖譜，專注于將用戶與朋友聯系起來，以及利用人工智能識別人臉的既得利益。亞馬遜擁有電子商務。對它來說，視覺搜索可以成為數字世界和現實世界之間的橋梁——例如，你拍攝一雙鞋，在亞馬遜上尋找類似的，也許是更便宜的。每家公司可能會以不同的方式對待視覺人工智能，但其含義是一樣的：在這個新興領域，即使現在還不能清楚地表達出它的價值，也會有一些資金在涌入這個新興領域。Forrester的搜索分析師Collin Colburn說：“想想看，你有可能會拍一張照片，去尋找你甚至無法描述的東西。這是非常強大的東西。這可能是最不成熟的搜索，但它可能最有潛力。”
谷歌有數百名員工獨立從事視覺人工智能的開發工作。Facebook擁有2萬名員工和300名人工智能研究人員，此外它還在社交網絡上進行120萬個視覺人工智能實驗。亞馬遜擁有超過50萬名員工，其中有5000名員工在Alexa上工作——它的新Echo Show不僅有麥克風，還配備了與Alexa互動的攝像頭——可以讓亞馬遜看到你的整個房間。Pinterest？該公司只有12名員工致力于視覺搜索。
但Pinterest比看起來更強大。首先，它擁有大量數據來訓練視覺人工智能。你擁有的圖像越多，算法就會越智能，而且它在提供用戶真正想要的推薦時也會變得更好。許多研究人員使用的最大公共數據集——Image Net，包括1400萬個日常物品的眾包照片網站。Pinterest擁有數十億張照片——由熱心的Pinner從博客上瀏覽上傳，或者是由公司自己發布——大部分都有完美的舞臺和燈光效果，因為它們是官方的產品攝影。電腦能更容易地看到完美的圖像。同樣重要的是：這些照片已經被Pinterest的忠實用戶親手標記并貼上標簽。
卡內基梅隆大學機器學習主管Manuela Veloso表示：“數據集越大，你感到驚訝的可能性就不會越大。Pinterest的數十億數據的有趣之處在于，它們將會覆蓋各種極端案例。”
此外，Pinterest的設計也會在用戶搜索時提供一些模糊的結果。這是Pinterest從牛油果學到的經驗。精確匹配是谷歌搜索的特色，它已經針對特定問題進行了優化，比如“你如何烤魚？”后面將會有一個完美的鏈接。Pinterest的用戶往往會提出更含糊的問題：他們每周可能會搜索幾次“海鮮晚餐創意”。對他們來說，不精確的答案并不是錯誤。而是靈感。
換句話說，Pinterest的人工智能在視覺搜索方面可能會失敗，但幸運的是能找到正確答案。想象一下，Siri會做同樣的事情。“在其他一些公司，我們談到了精確的召回。但說到底，用戶對功能的感覺是非常有用的，”Pinterest的工程主管Li Fan表示。他們可能不需要100%的精確度。沒關系。只要我們實現了預期，他們就會覺得這是一種持續的體驗，他們覺得這很有用。”
Li Fan。
在競爭平臺因侵犯隱私而受到攻擊的時候，Pinterest也已經贏得了用戶的信任。人們把Pinterest看作是搜索引擎或社交網絡之外的東西。Silbermann說：“我們試圖與用戶建立的關系是，當你分享自己的事情時，是基于你想要更好的推薦，我們會為你提供你想要的內容。”這一預期相當明確。你用Pinterest來尋找一個時尚風格，所以如果我們問你：“你最喜歡的顏色是什么？”這一點沒有任何侵犯性。”這樣的互動讓Pinterest能夠提供既出人意料又準確的結果。它的設計語言更像是精心挑選的而不是經過精心策劃的，而且也比機器人更人性化。
四、
Pinterest成立于2010年，主要是在設計上花費了巨大投資：它可以讓用戶收集和整理感興趣的主題，而不是難看的藍色文字鏈接，而是虛擬索引卡上的華麗照片。聯合創始人Sharp是一位具有創造性而且有遠見的人，他曾在哥倫比亞大學的研究生建筑學院接受過培訓，是首席執行官Silbermann的完美補充——他是一名管理顧問，后來成為了企業家。該平臺非常受歡迎:2012年，comScore分析公司宣布它是歷史上增長最快的Web服務。
Pinterest的照片卡采用了一種新穎的設計方式，比如谷歌等巨頭，從搜索結果到Android操作系統，都在使用它們。不過，自那以后，它的飛速增長已經放緩。如今，光芒已經被Instagram的8億月活躍用戶和使用激進AR技術的Snapchat所掩蓋。
不過，Pinterest并未追求激進的增長，而是在其核心產品上加倍投資：預測用戶想看什么。“我們最終在機器學習上投入了大量資金，”Sharp說，他現在是公司的首席產品官。“大部分用戶看到的內容都是通過算法來決定的，”他說。“這是一個推薦，一個搜索結果，或者一個Related Pin。”
Evan Sharp。
后一項功能是在2013年發布的，它能根據你看過的內容生成一個相對簡單的推薦Pin列表。到2014年，公司才委派了一些人工智能工程師，讓它變得更好。他們通過訓練算法來推薦相關的話題，并根據視覺線索推薦類似的項目，優先選擇能獲得最多點擊量的Pin。如果你點擊一個由倒放的樹枝做成的衣架，Related Pins中會包括一份韋恩（Venn）圖，里面包含了一些合理的建議，包括房屋裝飾和木質裝潢，包括樹干上的衣架、小房間的分隔物，以及一個回收的谷倉木鑰匙托盤。今天，Related Pins占據了Pinterest所有互動中的40%。
2016年，該公司在視覺人工智能領域進行了早期投資，并在谷歌上招募了計算機視覺專家Li Fan。她在谷歌工作了8年，之后在百度工作，領導了1000名工程師。然后她又回到谷歌，選擇了一個更加專注的角色，擔任谷歌圖片搜索的負責人。最后，Pinterest找上門來。“作為領導者和個人，Li Fan的價值觀與Pinterest的價值觀非常契合，”Silbermann說。“有一件事讓我產生了共鳴，那就是她認為科技是一種豐富人們生活的方式，而不是單單的技術。”
在Li Fan的領導下，Pinterest在Lens、Pins和公司的瀏覽器擴展工具上進行的視覺搜索同比增長了近70%，每月的搜索量超過3億次。與此同時，Pinterest的商業合作伙伴已經看到了他們的 “Shop the Look”Pins點擊量背后巨大的潛力——這一功能可以讓用戶點擊，然后購買圖片中的商品。
所有這些都匯聚成一個豐富的商業機會。FirstMark Capital的風險投資人Rick Heitzmann表示：“最初，Pinterest是由用戶類別進行管理的。”他曾在2009年對Pinterest的聯合創始人進行了第一次調查，并參與了此后的每一輪投資。“但隨著科技的發展，它是由人工智能、圖像識別，以及找到你喜愛和關心的東西所驅動的。”Pinterest的使命是將視覺搜索變成一項內容，而Heitzmann對這些機會感到非常興奮。“你可以看到潛在的市場規模很大。”
Pinterest已經向廣告商提供了一個吸引注意力的平臺。根據一項調查顯示，93%的用戶使用Pinterest來制定購物計劃，87%的人通過Pinterest購買了一些東西。但至關重要的是，Pinner還沒有確定他們想要的確切產品。根據Pinterest的數據，97%的搜索請求沒有一個特定的品牌。與此同時，視覺搜索工具讓這個品牌發現過程更加誘人，尤其是當搜索結果與用戶的個人“口味圖譜”相關聯的時候。
Target最近成為了Pinterest的Lens技術的獨家美國零售合作伙伴。很快，在該零售商的主應用內，你將可以使用集成版的Lens，比如說，拍攝一盞臺燈，并看到由Target銷售的視覺效果相似的產品。“我們的客人在每一種購物體驗中都渴望舒適和方便。”視覺搜索是一個巨大的解鎖工具，因為它消除了產品搜索中的很多障礙，”Target的CMO Rick Gomez說。“通過簡單地拍下一件感興趣的商品，Pinterest的鏡頭將會返回那些專門針對我們的客戶所尋找的產品。”（Walmart、American Eagle和Tommy Hilfiger在他們的應用上也有視覺搜索功能，這是由初創公司Slyce創建的。）Pinterest還與三星合作，為Galaxy智能手機提供視覺搜索功能，并與Shopstyle合作，將Lens的結果與500萬多種時尚配飾的可購買Pins聯系在一起。各大品牌開始明白，視覺搜索是它們未來的重要組成部分。
當然，問題在于品牌的營銷預算有限。Pinterest并不是唯一一家希望通過視覺人工智能銷售產品的公司。
五、
去年11月，Pinterest推出了其最新版的“Lens：Lens Your Look”，幫助用戶找到新方法來搭配他們已經擁有的衣服。在你的衣櫥里拍一些東西，比如一雙厚實的黑色高跟鞋，然后用文字搜索來尋找可能搭配的衣服（比如“黑色連衣裙”）。“Lens”會給你提供一個穿著黑色連衣裙和高跟鞋的人的形象——甚至可能和你自己的品牌和風格完全相同。
當用戶點擊特定的圖片時，Pinterest會了解到哪些搜索結果基本上是正確的，或者是最正確的，而且可以在下次對它們進行優先排序。這是該公司對視覺搜索的完美提煉：挖掘其龐大的數據庫，挖掘用戶的品味，擁抱不完美。
但這并不意味著用戶的注意力就會一直存在。Sharp是第一個承認視覺搜索的確切工具甚至還沒有發明的人：我們真的會用我們的手機攝像頭來進行點搜索，還是需要一些AR頭戴設備來實現這個概念呢？“我們還處于早期階段，”Sharp說，“就像90年代中期的文本搜索領域一樣。這是一項技術，很有趣，但沒有人真正深入了解產品是什么，以及它將解決什么問題。”
問題是，如果Pinterest能破解這一密碼的話。我們會不會“Pin它”，而不是“谷歌它”？這一前景聽起來令人畏懼，尤其是在Pinterest與世界上一些最有價值、最強大的公司競爭的情況下。
Sharp走到白板前，畫了一個四象限的坐標軸。在X軸上，他寫道“分享和搜索”。在Y軸上，他寫著“文字和視覺”。
文本分享？這個象限屬于Facebook和Twitter。視覺分享？Facebook、Instagram和Snapchat。搜索文本？這就是谷歌和必應。而是通過視覺來尋找？。他在這個象限里寫了一家公司。“Pinterest。”畫一個坐標軸，將你的公司單獨放在一個象限里是一個典型的創始人舉動。但Sharp在一件事上的觀點是正確的：視覺搜索是一種罕見的未被殖民的空間。
“這是這里最值錢的四分之一，”他說。“這是Pinterest的前提。”
原文鏈接：https://www.fastcodesign.com/90152812/pinterest-sees-the-future
編譯組出品。編輯：郝鵬程
編者按：隨著圖像識別技術的不斷發展，視覺搜索也愈加被人所重視，它會造就下一個谷歌嗎？近日，FastCodesign發布了一篇文章，介紹了該領域Pinterest近年來的發展狀況及其背后的潛力與野心。作者為MARK WILSON，文章由36氪編譯。
一、
這一切都從16個月前一個牛油果開始的。
在Pinterest位于舊金山的總部，一個特殊的牛油果被放置在會議室的桌子上。Pinterest的創意總監AlbertPereta被六名同事簇擁著，走近水果，小心翼翼地用手機瞄準拍攝。他正在測試該公司的最新發明，這是一項名為“Lens”的功能。如果測試正確，它不僅能識別出這種水果，還能搜索過去7年里上傳至該服務的數十億張照片，以尋找類似的圖片。
Pereta拍下照片后，應用花了一會兒時間與云同步，然后把結果反饋出來。Pereta的手機屏幕上充滿了看似無窮無盡的、從各個角度拍攝的牛油果。
“很多人都很驚嘆，說‘這東西真好！’”Pereta說道。Pinterest已經能夠通過視覺線索識別出了一個物體，這是一個非常困難的工程問題。但Pereta并不滿意：“當我看著這個結果的時候，我在想，‘誰在乎呢？’”
視覺搜索技術的效果非常好，但其結果毫無意義。沒有人會拍下牛油果的照片，希望能得到一幅幾乎完全相同的牛油果照片，更不用說無窮無盡的照片了。“我們開始問，‘如果你給一個牛油果拍照，你想要什么？’”Pereta回憶道。有人說他想要一份食譜。“所以你甚至不會看到牛油果，你會看到一些粘乎乎的牛油果醬，”Pereta說。或者Pinterest可以提供關于如何種植牛油果的信息，或者你可以用牛油果做些什么。“那太不可思議了，”Pereta回憶說。
如今，牛油果的故事已經成為了一個寓言，安放在Pinterest總部的膠合板墻內。這提醒人們，個性化比完美更有價值。隨著該公司在去年2月推出Lens Beta版測試工具，深入到新興的視覺搜索領域時，這一點尤為明顯——這個版本并沒有調用成千上萬的牛油果圖片。結合Pereta的見解，這款應用能夠提供與它們相關的想法，比如，制作牛油果醬。這是一個早期的視角，即Pinterest在非常現實的情況下，如何將希望寄托在視覺人工智能上，從而徹底改變人們購物和飲食方式的一切行為。
二、
在過去的二十年里，我們通過在搜索欄中輸入信息來尋找網絡上的東西。由于機器學習技術的進步，計算機視覺即將讓我們通過拍照來進行搜索。谷歌、Facebook、微軟和亞馬遜都在向這項技術投入大量資源。這也就不足為奇了：谷歌將在2017年通過傳統文本搜索廣告獲得約286億美元的收入。使用Alexa、Siri和GoogleAssistant等服務的語音搜索功能，現在才剛剛實現。視覺搜索呢？這可能是一件具有里程碑意義的事情，因為許多技術專家都設想未來的智能手機不會出現在我們的口袋里，而是在我們的眼睛里。
Pinterest首席執行官BenSilbermann表示：“我真的認為，攝像頭將成為下一個鍵盤。它將成為你用來查詢周圍世界、發現身邊事物、或想象某個東西可能適合你生活的一個基本工具。”
在這個競爭激烈的領域，Pinterest看起來并不算什么。但其在那堆牛油果下隱藏了很多東西。當各種黨派之爭的內容占據了許多應用和網站的時候，Pinterest的2億月活躍用戶就會轉向該服務，從而尋求一種更美好的生活，比如更舒適的客廳、冒險的旅行，或者健康的零食。根據尼爾森的一項研究，他們不是在尋找美食照片，也不一些能夠發到Instagram上的照片，而是他們可以真正烹飪的日常食物：98%的Pinterest用戶表示他們會嘗試在該服務中發現的新東西。廣告商們也開始接受這個網站。從2015年到2017年，Pinterest的年營收預計將增長5倍，達到5億美元，而其在全球范圍內的用戶增長將達到40%。（Pinterest拒絕就營收增長和預測發表評論。）
Ben Silbermann。
Pinterest的受歡迎程度在于，它能夠為每一位用戶創建一個獨特的“品味圖譜”，從而推斷出其可能感興趣的其他東西。現在，Pinterest正致力于將計算機視覺技術融入到對用戶偏好的深入理解中。“所有的東西都在不斷涌現，這是Pinterest在為你的實際生活尋找創意時的有用之處，”Silbermann說。“如果人們真的用Pinterest來決定他們在家里做的所有事情，比如他們準備烹飪的食物，或者是他們的下一個假期等等，那就會有巨大的價值。”這意味著Pinterest不僅需要像谷歌一樣掌握你正在尋找的東西，還必須預測你永遠不知道的，但你想要的東西。如果這家公司取得成功，它可以利用我們的相機開啟一個無窮無盡的個人發現世界。Pinterest聯合創始人EvanSharp表示：“視覺搜索能產生的持久影響不會是什么特定的產品或功能，而是它讓人們能夠做的事情：將人們看到的任何東西，變成可以用來在互聯網上發現更多東西的東西。”
三、
我站在舊金山SOMA社區的一間花園公寓里拿出了Pinterest應用。即便是在地下室的照明設備中，鏡頭也能很好地工作，將我拍攝的物體與其突出的特征匹配起來。鏡頭不僅能看到一把椅子，還能看到是一把俱樂部的椅子。不僅僅是一個枕頭，還是一個kilim枕頭。不僅僅是“藝術”品，還是一幅Rothko的畫作。通過這個過程，我實際上學到了許多東西。許多識別結果伴隨著的都有可操作的鏈接，我可以用它來標記、甚至購買。
后來，我嘗試通過GoogleLens拍攝類似的照片，這是Pinterest的一個競爭對手，在今年早些時候在Pixel手機上推出了測試版。谷歌的版本不知道它看到了一把椅子，甚至是家具，并向我道歉。它甚至誤把枕頭當作被子。它唯一能與之匹配的是Rothko的作品，不過值得注意的是，人們普遍認為，識別2D藝術品是視覺搜索工具最簡單的挑戰之一。
GoogleLens不是很好。至少現在還沒有很好。但你可以看到，視覺AI是如何與公司的更大的業務需求以及其他科技巨頭相結合的。谷歌的業務是建立索引，因此該公司希望幫助用戶直觀地識別周圍的世界，這是有道理的。Facebook有自己的社交圖譜，專注于將用戶與朋友聯系起來，以及利用人工智能識別人臉的既得利益。亞馬遜擁有電子商務。對它來說，視覺搜索可以成為數字世界和現實世界之間的橋梁——例如，你拍攝一雙鞋，在亞馬遜上尋找類似的，也許是更便宜的。每家公司可能會以不同的方式對待視覺人工智能，但其含義是一樣的：在這個新興領域，即使現在還不能清楚地表達出它的價值，也會有一些資金在涌入這個新興領域。Forrester的搜索分析師CollinColburn說：“想想看，你有可能會拍一張照片，去尋找你甚至無法描述的東西。這是非常強大的東西。這可能是最不成熟的搜索，但它可能最有潛力。”
谷歌有數百名員工獨立從事視覺人工智能的開發工作。Facebook擁有2萬名員工和300名人工智能研究人員，此外它還在社交網絡上進行120萬個視覺人工智能實驗。亞馬遜擁有超過50萬名員工，其中有5000名員工在Alexa上工作——它的新EchoShow不僅有麥克風，還配備了與Alexa互動的攝像頭——可以讓亞馬遜看到你的整個房間。Pinterest？該公司只有12名員工致力于視覺搜索。
但Pinterest比看起來更強大。首先，它擁有大量數據來訓練視覺人工智能。你擁有的圖像越多，算法就會越智能，而且它在提供用戶真正想要的推薦時也會變得更好。許多研究人員使用的最大公共數據集——Image Net，包括1400萬個日常物品的眾包照片網站。Pinterest擁有數十億張照片——由熱心的Pinner從博客上瀏覽上傳，或者是由公司自己發布——大部分都有完美的舞臺和燈光效果，因為它們是官方的產品攝影。電腦能更容易地看到完美的圖像。同樣重要的是：這些照片已經被Pinterest的忠實用戶親手標記并貼上標簽。
卡內基梅隆大學機器學習主管ManuelaVeloso表示：“數據集越大，你感到驚訝的可能性就不會越大。Pinterest的數十億數據的有趣之處在于，它們將會覆蓋各種極端案例。”
此外，Pinterest的設計也會在用戶搜索時提供一些模糊的結果。這是Pinterest從牛油果學到的經驗。精確匹配是谷歌搜索的特色，它已經針對特定問題進行了優化，比如“你如何烤魚？”后面將會有一個完美的鏈接。Pinterest的用戶往往會提出更含糊的問題：他們每周可能會搜索幾次“海鮮晚餐創意”。對他們來說，不精確的答案并不是錯誤。而是靈感。
換句話說，Pinterest的人工智能在視覺搜索方面可能會失敗，但幸運的是能找到正確答案。想象一下，Siri會做同樣的事情。“在其他一些公司，我們談到了精確的召回。但說到底，用戶對功能的感覺是非常有用的，”Pinterest的工程主管LiFan表示。他們可能不需要100%的精確度。沒關系。只要我們實現了預期，他們就會覺得這是一種持續的體驗，他們覺得這很有用。”
LiFan。
在競爭平臺因侵犯隱私而受到攻擊的時候，Pinterest也已經贏得了用戶的信任。人們把Pinterest看作是搜索引擎或社交網絡之外的東西。Silbermann說：“我們試圖與用戶建立的關系是，當你分享自己的事情時，是基于你想要更好的推薦，我們會為你提供你想要的內容。”這一預期相當明確。你用Pinterest來尋找一個時尚風格，所以如果我們問你：“你最喜歡的顏色是什么？”這一點沒有任何侵犯性。”這樣的互動讓Pinterest能夠提供既出人意料又準確的結果。它的設計語言更像是精心挑選的而不是經過精心策劃的，而且也比機器人更人性化。
四、
Pinterest成立于2010年，主要是在設計上花費了巨大投資：它可以讓用戶收集和整理感興趣的主題，而不是難看的藍色文字鏈接，而是虛擬索引卡上的華麗照片。聯合創始人Sharp是一位具有創造性而且有遠見的人，他曾在哥倫比亞大學的研究生建筑學院接受過培訓，是首席執行官Silbermann的完美補充——他是一名管理顧問，后來成為了企業家。該平臺非常受歡迎:2012年，comScore分析公司宣布它是歷史上增長最快的Web服務。
Pinterest的照片卡采用了一種新穎的設計方式，比如谷歌等巨頭，從搜索結果到Android操作系統，都在使用它們。不過，自那以后，它的飛速增長已經放緩。如今，光芒已經被Instagram的8億月活躍用戶和使用激進AR技術的Snapchat所掩蓋。
不過，Pinterest并未追求激進的增長，而是在其核心產品上加倍投資：預測用戶想看什么。“我們最終在機器學習上投入了大量資金，”Sharp說，他現在是公司的首席產品官。“大部分用戶看到的內容都是通過算法來決定的，”他說。“這是一個推薦，一個搜索結果，或者一個RelatedPin。”
EvanSharp。
后一項功能是在2013年發布的，它能根據你看過的內容生成一個相對簡單的推薦Pin列表。到2014年，公司才委派了一些人工智能工程師，讓它變得更好。他們通過訓練算法來推薦相關的話題，并根據視覺線索推薦類似的項目，優先選擇能獲得最多點擊量的Pin。如果你點擊一個由倒放的樹枝做成的衣架，RelatedPins中會包括一份韋恩（Venn）圖，里面包含了一些合理的建議，包括房屋裝飾和木質裝潢，包括樹干上的衣架、小房間的分隔物，以及一個回收的谷倉木鑰匙托盤。今天，RelatedPins占據了Pinterest所有互動中的40%。
2016年，該公司在視覺人工智能領域進行了早期投資，并在谷歌上招募了計算機視覺專家Li Fan。她在谷歌工作了8年，之后在百度工作，領導了1000名工程師。然后她又回到谷歌，選擇了一個更加專注的角色，擔任谷歌圖片搜索的負責人。最后，Pinterest找上門來。“作為領導者和個人，LiFan的價值觀與Pinterest的價值觀非常契合，”Silbermann說。“有一件事讓我產生了共鳴，那就是她認為科技是一種豐富人們生活的方式，而不是單單的技術。”
在LiFan的領導下，Pinterest在Lens、Pins和公司的瀏覽器擴展工具上進行的視覺搜索同比增長了近70%，每月的搜索量超過3億次。與此同時，Pinterest的商業合作伙伴已經看到了他們的 “ShoptheLook”Pins點擊量背后巨大的潛力——這一功能可以讓用戶點擊，然后購買圖片中的商品。
所有這些都匯聚成一個豐富的商業機會。FirstMarkCapital的風險投資人RickHeitzmann表示：“最初，Pinterest是由用戶類別進行管理的。”他曾在2009年對Pinterest的聯合創始人進行了第一次調查，并參與了此后的每一輪投資。“但隨著科技的發展，它是由人工智能、圖像識別，以及找到你喜愛和關心的東西所驅動的。”Pinterest的使命是將視覺搜索變成一項內容，而Heitzmann對這些機會感到非常興奮。“你可以看到潛在的市場規模很大。”
Pinterest已經向廣告商提供了一個吸引注意力的平臺。根據一項調查顯示，93%的用戶使用Pinterest來制定購物計劃，87%的人通過Pinterest購買了一些東西。但至關重要的是，Pinner還沒有確定他們想要的確切產品。根據Pinterest的數據，97%的搜索請求沒有一個特定的品牌。與此同時，視覺搜索工具讓這個品牌發現過程更加誘人，尤其是當搜索結果與用戶的個人“口味圖譜”相關聯的時候。
Target最近成為了Pinterest的Lens技術的獨家美國零售合作伙伴。很快，在該零售商的主應用內，你將可以使用集成版的Lens，比如說，拍攝一盞臺燈，并看到由Target銷售的視覺效果相似的產品。“我們的客人在每一種購物體驗中都渴望舒適和方便。”視覺搜索是一個巨大的解鎖工具，因為它消除了產品搜索中的很多障礙，”Target的CMORickGomez說。“通過簡單地拍下一件感興趣的商品，Pinterest的鏡頭將會返回那些專門針對我們的客戶所尋找的產品。”（Walmart、AmericanEagle和TommyHilfiger在他們的應用上也有視覺搜索功能，這是由初創公司Slyce創建的。）Pinterest還與三星合作，為Galaxy智能手機提供視覺搜索功能，并與Shopstyle合作，將Lens的結果與500萬多種時尚配飾的可購買Pins聯系在一起。各大品牌開始明白，視覺搜索是它們未來的重要組成部分。
當然，問題在于品牌的營銷預算有限。Pinterest并不是唯一一家希望通過視覺人工智能銷售產品的公司。
五、
去年11月，Pinterest推出了其最新版的“Lens：LensYourLook”，幫助用戶找到新方法來搭配他們已經擁有的衣服。在你的衣櫥里拍一些東西，比如一雙厚實的黑色高跟鞋，然后用文字搜索來尋找可能搭配的衣服（比如“黑色連衣裙”）。“Lens”會給你提供一個穿著黑色連衣裙和高跟鞋的人的形象——甚至可能和你自己的品牌和風格完全相同。
當用戶點擊特定的圖片時，Pinterest會了解到哪些搜索結果基本上是正確的，或者是最正確的，而且可以在下次對它們進行優先排序。這是該公司對視覺搜索的完美提煉：挖掘其龐大的數據庫，挖掘用戶的品味，擁抱不完美。
但這并不意味著用戶的注意力就會一直存在。Sharp是第一個承認視覺搜索的確切工具甚至還沒有發明的人：我們真的會用我們的手機攝像頭來進行點搜索，還是需要一些AR頭戴設備來實現這個概念呢？“我們還處于早期階段，”Sharp說，“就像90年代中期的文本搜索領域一樣。這是一項技術，很有趣，但沒有人真正深入了解產品是什么，以及它將解決什么問題。”
問題是，如果Pinterest能破解這一密碼的話。我們會不會“Pin它”，而不是“谷歌它”？這一前景聽起來令人畏懼，尤其是在Pinterest與世界上一些最有價值、最強大的公司競爭的情況下。
Sharp走到白板前，畫了一個四象限的坐標軸。在X軸上，他寫道“分享和搜索”。在Y軸上，他寫著“文字和視覺”。
文本分享？這個象限屬于Facebook和Twitter。視覺分享？Facebook、Instagram和Snapchat。搜索文本？這就是谷歌和必應。而是通過視覺來尋找？。他在這個象限里寫了一家公司。“Pinterest。”畫一個坐標軸，將你的公司單獨放在一個象限里是一個典型的創始人舉動。但Sharp在一件事上的觀點是正確的：視覺搜索是一種罕見的未被殖民的空間。
“這是這里最值錢的四分之一，”他說。“這是Pinterest的前提。”
原文鏈接：https://www.fastcodesign.com/90152812/pinterest-sees-the-future
編譯組出品。編輯：郝鵬程
京公網安備 11010502049343號