
體驗(yàn)地址見文末
查找和#冰墩墩相似圖片,這種應(yīng)用是如何實(shí)現(xiàn)的??
首先,我們需要了解圖像搜索引擎所采用的AI是哪一類型的。
圖像搜索屬于認(rèn)知類的AI應(yīng)用,具備高準(zhǔn)確率。此類技術(shù)由于深度學(xué)習(xí)的飛躍式發(fā)展,準(zhǔn)確率已經(jīng)超越了人類。
認(rèn)知類的AI有許多應(yīng)用:內(nèi)容定位(音樂搜索、圖像搜索)、人臉識(shí)別(不怕臉盲)、文本-語音轉(zhuǎn)換、機(jī)器翻譯(不用查字典)等等。此類應(yīng)用彌補(bǔ)了人類在認(rèn)知能力上的能力不足(缺陷)。因?yàn)闆]有人可以在海量,比如1TB或者1PB的數(shù)據(jù)中找到自己想要的數(shù)據(jù)。人類查看一條條數(shù)據(jù),當(dāng)數(shù)據(jù)量成千上萬的時(shí)候,效率開始低下;反而機(jī)器,不會(huì)疲勞,而且計(jì)算速度非常快,可以短時(shí)間閱讀海量數(shù)據(jù),找到自己需要的數(shù)據(jù)。拓展閱讀:普林斯頓大學(xué)Arvind Narayanan發(fā)表的一個(gè)關(guān)于AI應(yīng)用的演講ppt《How to recognize AI snake oil》# 體驗(yàn)設(shè)計(jì)
確實(shí),從海量的數(shù)據(jù)中找尋到用戶想找的數(shù)據(jù),此類應(yīng)用已經(jīng)具備了較高的準(zhǔn)確率;但是仍然有一些設(shè)計(jì)上的問題需要解決,我們?nèi)绾螏椭脩舭严胝业臄?shù)據(jù)的模樣描述清楚,清楚到機(jī)器可以準(zhǔn)確理解。需要體驗(yàn)設(shè)計(jì)師好好思考這個(gè)問題,粗暴的解決方案就是通過表單的方式,把各種選項(xiàng)讓用戶填寫,盡量是通過選擇題的方式(但這并不是一個(gè)優(yōu)雅、簡潔的方案)。如何把用戶的需求轉(zhuǎn)化為機(jī)器語言,這是體驗(yàn)設(shè)計(jì)需要重點(diǎn)考慮的問題。# 反向圖像搜索
Reverse Image Search
反向圖像搜索允許用戶在互聯(lián)網(wǎng)上找到最相似的圖片。可以按圖片、關(guān)鍵字或圖片的 URL 進(jìn)行搜索,常用來尋找現(xiàn)有圖片的原始出處,或者低分辨率縮略圖的原始大圖,或者是查找來源。Reverse image search allows you to find the most similar pictures over the internet. You can search by image, by keyword, or by the URL of the picture to find photos, memes, profile pictures, and wallpapers along with their sources.
包括我們常說的以圖搜圖(比較優(yōu)雅的名稱叫可視化搜索) 讓你能夠使用圖像替代文本在 Web 中搜索。你可以使用圖像查找相同的圖像及產(chǎn)品、查看其他網(wǎng)站,甚至還可以獲取食譜。以圖搜圖有這些應(yīng)用:電商搜同款、圖片搜索、安防監(jiān)控、藥物檢索、盜版檢測、紡織面料、視頻摘要、藝術(shù)創(chuàng)作……# 案例/靈感
[?這是什么動(dòng)畫 ]
一個(gè)用于通過動(dòng)畫截圖找出處的搜索引擎??梢哉业礁鷦?dòng)畫截圖相似的動(dòng)畫片截圖,并找到動(dòng)畫的詳細(xì)介紹,動(dòng)漫愛好者找動(dòng)畫出處的好幫手!
作者在遇到 LIRE 的12個(gè)小時(shí)后就開發(fā)出了第一個(gè)原型。在設(shè)置好 Web 服務(wù)器和 Solr 之后,只需要編寫幾個(gè)腳本來將所有代碼放在一起。為了分析視頻,作者使用 ffmpeg 將每個(gè)幀作為 jpg 文件提取,每幀的時(shí)間作為文件名。然后利用 Lire 的 ParallelSolrIndexer 分析所有這些圖像并生成一個(gè) XML 文件。在將此 XML 加載到 Solr 。最后,作者寫了幾行簡單的 Javascript 來使用 Solr REST API 用于搜索圖像。Lire 是 java 語言基于 lucene 的框架,支持使用 Solr ,而 Solr 是一個(gè)高性能,采用 Java5 開發(fā),基于 Lucene 的全文搜索服務(wù)器。Solr 有相關(guān)的 NodeJS 庫,對于 NodeJS 開發(fā)者也是非常友好的。創(chuàng)建以圖搜圖引擎的步驟相當(dāng)簡單,基于 ?opencv 的一些傳統(tǒng)圖像算法,提取顏色和紋理特征,例如圖像的顏色、輪廓、直方圖等信息,作為相似性搜索的索引。Lire 還內(nèi)置了中文分詞&模糊搜索功能,比起傳統(tǒng)的基于關(guān)鍵詞搜索,搜索效果更佳。LIRE于2021.4.23 宣布停止維護(hù)更新?
- End of Life reached for LIRE .This project is no longer maintained. I want to thank all those who helped, found kind words of support, and cited LIRE in their academic work. dermotte/LIRE: Open source library for content based image retrieval / visual information retrieval. (github.com)
[ EagleEye ]
跟蹤你的朋友。使用圖像識(shí)別和反向圖像搜索查找他們的Instagram,F(xiàn)B和Twitter個(gè)人資料。
至少需要一張您要找的人的圖像以及有關(guān)其姓名的線索。將這些數(shù)據(jù)輸入EagleEye,它會(huì)嘗試查找此人的Instagram,Youtube,F(xiàn)acebook和Twitter的個(gè)人資料,通過人臉比對,定位出你所需要尋找的目標(biāo)人物。
[ image-match開源項(xiàng)目 ]
圖像匹配很簡單,代碼的實(shí)現(xiàn)基于論文?An image signature for any kind of image, Wong et al. reference implementation。用于從庫中查找近似圖像的包。它與pHash類似,可以輕松擴(kuò)展到數(shù)十億張圖像。PLEASE NOTE:該算法旨在發(fā)現(xiàn)幾乎重復(fù)的圖像——比如版權(quán)侵犯檢測。它的目的不是尋找概念上相似的圖像。[ shutterstock ]
美股上市公司 Shutterstock 作為全球第一大微利圖庫公司,是全球最大的以會(huì)員訂閱模式下載圖片的圖庫公司,目前公司市值16.49億美元!


Shutterstock 四項(xiàng)創(chuàng)新功能:
細(xì)化搜索,然后選中最佳結(jié)果。計(jì)算機(jī)視覺技術(shù)將發(fā)現(xiàn)具有相同外觀和感覺的圖片。
Shutterstock Reveal任選一張網(wǎng)絡(luò)圖片,Chrome 擴(kuò)展會(huì)從收藏中精心挑選出與之相符的圖片 - 不僅免版稅,而且隨時(shí)可供您使用。
組合搜索您的圖片需要一個(gè)特定的布局嗎?將關(guān)鍵字添加到畫布,并放置在您希望對象顯示的位置。
復(fù)制空間想要在圖片上添加文本?使用此新功能找到,帶有恰好復(fù)制空間的圖片。
[ AI-Powered?API ]
Evertrove API是一種AI驅(qū)動(dòng)的圖像和視頻搜索API。使用Evertrove,你可以簡單地上傳圖像或視頻,并在它們之間實(shí)時(shí)搜索。讓客戶快速找到他們想要的東西,從而提高轉(zhuǎn)化率和用戶體驗(yàn)!

[ 自動(dòng)標(biāo)注+以圖搜圖=?]
圖片或者文本,我們都可以先做自動(dòng)標(biāo)注(目標(biāo)檢測、命名實(shí)體識(shí)別),然后再擴(kuò)充豐富相似信息。- 結(jié)合了目標(biāo)檢測的以圖搜圖。biying的以圖搜圖,先是識(shí)別圖里的物體(目標(biāo)檢測),然后點(diǎn)擊物體,再調(diào)用以圖搜圖。- 同樣的原理,在文本搜索中,我們也可以結(jié)合命名實(shí)體識(shí)別,先識(shí)別人物、機(jī)構(gòu)等實(shí)體詞,然后再搜索。
[ 靈感:免費(fèi)圖片版權(quán)引擎 black hole ]
網(wǎng)上有大量的免圖片版權(quán)網(wǎng)站freephotos.cc/zh
www.foodiesfeed.com
www.reshot.com
stocksnap.io
unsplash.com
基于它們的圖片,我們可以用爬蟲收集下來,然后構(gòu)建我們的一個(gè)圖片搜索引擎,對外提供一個(gè)以圖搜圖的接口。STEP1
用戶寫完文章、配好圖
STEP2
把文章中的圖片,以圖搜圖的方式,進(jìn)行查詢
STEP3
根據(jù)一個(gè)相似度的閾值,判斷圖片是否免費(fèi)可商用
STEP4
輸出可免費(fèi)商用的圖片標(biāo)記
[ immerse 設(shè)計(jì)靈感 ]

由社區(qū)成員?ML1216 投稿
支持文字、圖片、畫圖搜索, 搜圖片、gif動(dòng)圖、名人名言。--- 持續(xù)更新中 ……
每個(gè)行業(yè)都有不同的搜圖需求,如果大家感興趣,歡迎加群告訴我們:只要關(guān)注人數(shù)足夠多,Mixlab 隨時(shí)為大家特邀發(fā)起 『 各類專題內(nèi)容或者線上、線下專場討論』!
一個(gè)人的探索有些孤單,一群人的探索會(huì)更有意思。?