Chat With RTX to aplikacja demonstracyjna, personalizująca model językowy GPT (LLM) połączony z własnymi treściami – dokumentami, notatkami, filmami lub innymi danymi.

Wykorzystując generację wspomaganą wyszukiwaniem (RAG) oraz akcelerację TensorRT-LLM i RTX,  możemy wysyłać zapytania do tego chatbota, aby szybko uzyskać istotne odpowiedzi.  Korzystanie z ChatBotu jest bezpieczne, ponieważ działa lokalnie na komputerze z systemem Windows RTX lub stacji roboczej.

Narzędzie wykorzystuje moc obliczeniową układów NVIDIA GeForce RTX 3000 i RTX 4000. Komputer powinien być wyposażony w co najmniej 16 GB RAM i działać w oparciu o system Windows 11.