Claude Cowork uczy się nowych umiejętności przez nagrania ekranu z komentarzem głosowym

Anthropic wprowadził nową funkcję do swojego asystenta AI Claude Cowork, która pozwala użytkownikom nagrywać niestandardowe umiejętności bezpośrednio w aplikacji desktopowej. Funkcja „Record a skill” umożliwia rejestrowanie ekranu podczas wykonywania zadań wraz z komentarzem głosowym, a następnie przekształca te nagrania w wielokrotnego użytku umiejętności. Szczegóły nowej funkcjonalności opisuje The Decoder.

Kluczowe wnioski

• Claude Cowork może teraz uczyć się nowych zadań poprzez nagrania ekranu z komentarzem głosowym użytkownika.
• Funkcja przechwytuje aktywność na ekranie, kliknięcia, pisanie i głos, przekształcając to w powtarzalne umiejętności.
• Nowa opcja jest dostępna dla użytkowników planów Pro, Max i Team przez menu „+” w sekcji Cowork.
• Po zapisaniu umiejętności może być automatycznie wykonywana bez konieczności powtarzania każdego kroku manualnie.
• Podobną funkcjonalność oferuje również OpenAI w swoim narzędziu Codex.

Jak działa nowa funkcja nagrywania

Funkcja „Record a skill” w Claude Cowork działa poprzez kompleksowe przechwytywanie działań użytkownika. System rejestruje nie tylko to, co dzieje się na ekranie, ale także wszystkie interakcje — kliknięcia myszą, wprowadzanie tekstu z klawiatury oraz narację głosową użytkownika wyjaśniającą wykonywane czynności.

Po zakończeniu nagrania Claude Cowork przetwarza zebrane dane i tworzy z nich powtarzalną umiejętność. Oznacza to, że gdy podobne zadanie pojawi się ponownie w przyszłości, zapisana umiejętność może zostać uruchomiona automatycznie, eliminując potrzebę ręcznego powtarzania każdego kroku przez użytkownika.

Dostępność i konkurencja

Nowa funkcjonalność jest dostępna poprzez menu „+” w sekcji Cowork aplikacji desktopowej Claude. Dostęp do „Record a skill” mają użytkownicy wykupionych planów Pro, Max oraz Team, co wskazuje na pozycjonowanie tej opcji jako funkcji premium.

Anthropic nie jest jedyną firmą oferującą tego typu rozwiązanie. OpenAI udostępnia podobną funkcjonalność w swoim narzędziu Codex, które również umożliwia nagrywanie przepływów pracy i odtwarzanie ich jako wielokrotnego użytku umiejętności.

Wprowadzenie tej funkcji wpisuje się w szerszy trend automatyzacji zadań poprzez uczenie maszynowe oparte na demonstracjach użytkowników, co może znacząco uprościć tworzenie niestandardowych automatyzacji bez konieczności programowania.