ChatGPT przeczyta twój ekran i usłyszy polecania, ale OpenAI ostrzega przed jednym błędem

OpenAI rozbudowuje możliwości ChatGPT i stawia kolejny krok w kierunku pełnoprawnego cyfrowego asystenta. Najnowsza aktualizacja aplikacji komputerowej wprowadza zaawansowany tryb głosowy, dzięki któremu użytkownik może rozmawiać z chatbotem jak z osobistym współpracownikiem.

Nowa funkcja pozwala nie tylko zadawać pytania, ale również zarządzać zadaniami, sprawdzać kalendarz, analizować wersje robocze wiadomości e-mail i korzystać z informacji widocznych na ekranie komputera. Nowość trafia do płatnych użytkowników ChatGPT i ma ułatwić pracę bez konieczności ciągłego sięgania po klawiaturę lub mysz.

ChatGPT Voice staje się osobistym asystentem

OpenAI poinformowało o udostępnieniu ChatGPT Voice w desktopowej aplikacji dla użytkowników planów Plus, Pro, Business, Enterprise oraz Edu. W przypadku klientów Enterprise i Edu funkcja będzie udostępniana stopniowo w ramach wcześniejszego dostępu, zanim stanie się standardowym elementem aplikacji.

Nowe rozwiązanie pozwala prowadzić naturalną rozmowę z chatbotem podczas wykonywania codziennych obowiązków. Użytkownik może rozpocząć nowe zadanie, zapytać o postęp już wykonywanej pracy albo zmienić polecenie w trakcie działania modelu. Wszystko odbywa się głosowo, bez konieczności przerywania pracy. Z funkcji skorzystają również właściciele iPhone'ów po sparowaniu smartfona z komputerem.

Firma OpenAI dodała ChatGPT Voice do swojej aplikacji komputerowej przeznaczonej dla użytkowników płatnych, umożliwiając koordynację zadań bez użycia rąk. Użytkownicy mogą poprosić ChatGPT o rozpoczęcie zadań, sprawdzenie postępu, zmianę kierunku i wykorzystanie kontekstu ekranu podczas rozmów. 

Sprawdzi kalendarz i przeczyta wersje robocze wiadomości

OpenAI rozwija ChatGPT w kierunku narzędzia wspierającego codzienną organizację pracy. Podczas rozmowy można poprosić model o sprawdzenie informacji związanych z wykonywanymi zadaniami, przejrzenie wersji roboczych wiadomości e-mail czy analizę zawartości aplikacji widocznych na ekranie.

Asystent potrafi korzystać z kontekstu aktualnie otwartych programów. Dzięki temu odpowiedzi nie są oparte wyłącznie na poleceniu głosowym, lecz również na informacjach znajdujących się w aktywnym oknie.

Rozwiązanie przypomina współpracę z drugim pracownikiem siedzącym obok komputera i obserwującym wykonywane działania.

Wystarczy powiedzieć: „Spójrz na to”

Jedną z najciekawszych nowości jest możliwość analizowania zawartości ekranu. Po aktywowaniu odpowiedniej opcji w ustawieniach użytkownik może wydać komendę „Spójrz na to”, a ChatGPT przechwyci aktywne okno aplikacji i wykorzysta jego zawartość podczas rozmowy.

Model może analizować tekst, dokumenty czy elementy interfejsu programu i udzielać odpowiedzi na ich podstawie.

OpenAI ostrzega przed udostępnianiem poufnych danych

Nowa funkcja wiąże się jednak z ważnym zastrzeżeniem dotyczącym prywatności. OpenAI informuje, że przechwytywane okno może zawierać nie tylko obraz widoczny na ekranie, ale również dostępny tekst znajdujący się poza aktualnym obszarem przewijania.

Oznacza to, że model może uzyskać dostęp do większej ilości informacji niż użytkownik widzi w danej chwili. Firma zaleca unikanie udostępniania aplikacji zawierających poufne dane lub informacje, których analiza przez sztuczną inteligencję nie jest konieczna.

Administratorzy korzystający z wersji firmowych otrzymali możliwość wyłączenia funkcji kontekstu ekranowego dla swoich organizacji.

Jeden czat głosowy, wiele możliwości

OpenAI podkreśla, że jednocześnie może działać tylko jedna sesja głosowa. Rozmowy podlegają również limitom czasowym liczonym w pięciogodzinnych oknach użytkowania.

Zadania uruchamiane podczas rozmów głosowych wykorzystują ten sam limit zasobów, który obowiązuje w pozostałych funkcjach ChatGPT.