ȘtiriTech&IT

NVIDIA ChatRTX a primit suport pentru interacțiune vocală, funcție Image Search și modele LLM avansate

NVIDIA ChatRTX a primit îmbunătățiri majore, chatbot-ul NVIDIA suportând acum recunoaștere vocală și imagine. În plus, îl poți conecta la modele LLM mai sofisticate, precum Gemma, cel mai recent LLM de la Google.

Lansat în luna februarie a acestui, Chat With RTX a primit deja îmbunătățiri majore, noua versiune ChatRTX apropiindu-se și mai mult de funcționalitatea pe care o poți obține cu alternative cloud precum ChatGPT. Principala diferență este că ChatRTX îți poate oferi o experiență mai personalizată, fără grija că altcineva ar putea accesa datele tale. ChatRTX poate rula pe orice PC Windows configurat cu un GPU din seria RTX 3xxx sau 4xxx. Modul de folosire este cât se poate de simplu, pornind de la instalarea aplicației cu același nume.

Ce îmbunătățiri a adus NVIDIA noii versiuni ChatRTX:

  • ChatRTX inventează lista de modele LLM acceptate cu Gemma, cel mai recent LLM de la Google și  ChatGLM3, un LLM deschis, bilingv (engleză și chineză), oferind utilizatorilor flexibilitate suplimentară
  • Suport pentru recunoaștere imagini și funcție Image Search – utilizatorii ChatRTX pot iniția căutări și interacționa la nivel local cu colecțiile lor de poze, fără a fi nevoie de etichetarea complexă a metadatelor, datorită  programului OpenAI Contrastive Language-Image Pre-training (CLIP)
  • Utilizatorii pot  „vorbi” acum cu datele lor, ChatRTX suportând Whisper, un sistem automat de recunoaștere vocală pentru modele AI, care îi permite să accepte interacțiune verbală

NVIDIA ChatRTX este conceput ca un sistem localizat, funcționând fără nevoia unei conexiuni la internet. Însă adevărata sa putere este dată de opțiunile pentru personalizare, ChatRTX poate fi conectat la baze de date și colecții de fișiere găzduite local (ex. documente text, fișe tehnice, imagini) și „educat” folosind seturi de instrucțiuni adăugate într-un document ușor editabil (.txt, .pdf, .doc, .docx, .xml). De asemenea îl poți conecta la alte modele LLM, precum Mistral și Llama 2, personalizând și mai mult capabilitățile sale. Iar dacă ești administratorul unui canal YouTube poți adăuga adrese URL pentru videoclipuri YouTube sau liste de redare întregi, obținând un chatbot care să funcționeze în rolul de ghid pentru vizitatorii canalului respectiv.

Ajutat cu integrare CLIP (Contrastive Language-Image Pre-Training) de la OpenAI, ChatRTX poate naviga acum prin colecțiile de imagini, ceea ce poate fi de mare ajutor în personalizarea experienței obținute și extinderea capabilităților sale. Spre exemplu acum poți solicita AI-ului să-ți sorteze imaginile în funcție de o anumită solicitare, să le bun elimini pe cele care întrunesc anumite criterii și să faci tot felul de lucruri cu un simplu prompt.

Dacă dispui un PC echipat cu accelerator grafic suportat, poți experimenta cu noua versiune ChatRTX descărcând kitul de instalare din pagina dedicată găzduită pe site-ul NVIDIA.

Aurelian Mihai

Îmi place să fiu la curent cu ultimele inovații și gadgeturi high-tech. Când nu scriu articole pentru Zona IT, îmi ocup timpul cu seriale SF, documentare sau periind internetul după tot felul de știri sau informații care-mi captează atenția. În week-end mă găsești cu bicicleta în parc sau colindând prin țară cu familia.

Articole asemanatoare

Back to top button