NVIDIA Chat RTX - lokálny AI model na rozpoznávanie obrazu
ChatRTX funguje na PC a notebookoch s grafikou NVIDIA RTX 40xx aj 30xx. Využíva lokálne AI modely a pomocou modelu CLIP dokáže podľa zadania vyhľadávať vo vašich fotkách.
CLIP (Contrastive Language–Image Pre-training), vyvinutý spoločnosťou OpenAI, je pokročilý model, ktorý premosťuje priepasť medzi vizuálnymi dátami a prirodzeným jazykom. CLIP je trénovaný na rôznorodom rozsahu obrázkov zozbieraných z internetu a ich zodpovedajúcich textových popisov. Na rozdiel od tradičných modelov, ktoré si vyžadujú priame školenie na konkrétne úlohy, dokáže CLIP porozumieť obsahu obrázkov, ktoré nikdy predtým nevidel a interpretovať kontext a detaily vo vizuálnom obsahu.
V ChatRTX od NVIDIA vylepšuje CLIP interakciu AI s vizuálnym obsahom pomocou metódy nazývanej kontrastný predtréning. Keď sa obrázok nahrá do ChatRTX, CLIP prevedie tento obrázok na reprezentáciu formou textových dát. To umožňuje vytváranie presných popisov obrázkov, odpovedanie na otázky o nich alebo hľadanie obrázkov, ktoré zodpovedajú danému textovému popisu.