Context Awareness w VoiceInk: co odczytuje z Twojego Maca i dokąd trafia ten tekst

Context Awareness pozwala Mode w VoiceInk dać swojemu modelowi AI więcej niż tylko Twoje słowa. Może dodać zaznaczony tekst, tekst ze schowka i tekst odczytany z ekranu, dzięki czemu odpowiedź pasuje do maila, na który odpowiadasz, a nazwa jest zapisana tak, jak widać ją na ekranie. Działa tylko z AI Enhancement, a dodany tekst trafia do tego dostawcy AI, którego używa dany Mode. Ta druga część jest warta przeczytania, zanim to włączysz.

YapToText, inna aplikacja do dyktowania na Maca, to mój projekt, więc czytaj to, co piszę o VoiceInk, z tą wiedzą. Każdy fakt o VoiceInk pochodzi z jego własnej dokumentacji, przeczytanej 10 października 2026.

Pobierz YapToText z Mac App StoreDo pobrania za darmo. Bez konta i bez blokad, dla macOS 14 lub nowszego na Macu z układem Apple. Kod źródłowy na GitHubie.

Trzy źródła

Z dokumentacji VoiceInk, Context Awareness, przeczytanej 10 października 2026. Bez uprawnienia dane źródło jest pomijane.

ŹródłoJak VoiceInk je pobieraUprawnienie
Selected TextOdczytuje bieżące zaznaczenie przez Dostępność w macOSDostępność
ClipboardOdczytuje tekst ze schowka na początku nagrywaniaNic dodatkowego
ScreenPrzechwytuje aktywne okno i odczytuje jego tekst przez OCR, na MacuScreen Recording (nagrywanie ekranu)

Włączanie dla Mode

  1. Otwórz Modes.
  2. Edytuj Mode, który ma włączone AI Enhancement.
  3. Rozwiń Context Awareness.
  4. Włącz Selected Text, Clipboard lub Screen.
  5. Zapisz Mode.

W niestandardowym prompcie możesz wskazać każde źródło znacznikiem: <CURRENTLY_SELECTED_TEXT>, <CLIPBOARD_CONTEXT> i <CURRENT_WINDOW_CONTEXT>. Dokumentacja podsuwa zastosowania, takie jak przepisanie zaznaczenia po wypowiedzeniu polecenia albo przygotowanie odpowiedzi na zaznaczony wątek mailowy.

Co jest wysyłane i do kogo

  • Do dostawcy AI. Kontekst trafia razem z żądaniem AI Enhancement do dostawcy i modelu, których używa dany Mode. Lokalna transkrypcja nie sprawia, że ulepszanie w chmurze staje się lokalne.
  • Tekst z ekranu, a nie obraz. OCR działa na Macu z użyciem frameworka Vision od Apple, a wysyłany jest wyodrębniony tekst, nie zrzut ekranu.
  • Migawka i tak powstaje. Na początku nagrywania na żywo VoiceInk przygotowuje w pamięci migawkę kontekstu. Przełączniki decydują, co trafia do żądania, a nie to, czy VoiceInk odczytuje to lokalnie.
  • Zapis w History. Żądanie AI zapisane w History może zawierać wysłany tekst kontekstu.
  • Nie dla każdego Mode. Modes bez ulepszania nie wysyłają kontekstu. VoiceInk Refine go ignoruje, a importowane pliki go nie zbierają.

Kiedy zostawić to wyłączone

Zalecenie samego VoiceInk brzmi: włączaj tylko te źródła, których wymaga zadanie, i zastanów się, który dostawca dostanie tekst. Źródło Screen w Mode, który działa w Twojej aplikacji pocztowej, wysyła widoczny tekst dowolnego otwartego maila. Jeśli to ma znaczenie, włącz kontekst w jednym Mode dla jednej aplikacji, a codzienny Mode zostaw bez niego. Dostawców opisuje strona o prywatności VoiceInk, a to, jak Mode jest wybierany dla każdej aplikacji, opisuje strona o Modes.

Jak kontekst obsługuje YapToText

VoiceInk według jego dokumentacji, przeczytanej 10 października 2026. YapToText według jego własnych ustawień i kodu źródłowego.

VoiceInkYapToText
Zaznaczony tekstTak, przez DostępnośćTak
SchowekTakTak
Aplikacja, w której jesteśPrzez dopasowanie ModeTak, a tryb Auto uwzględnia aplikację, na przykład Email w aplikacji Mail
Tekst z ekranu przez OCRTak, z uprawnieniem Screen RecordingNie. Nie przechwytuje ekranu
Gdzie działa AIU dostawcy danego Mode, lokalnie lub w chmurzeNa Macu

Każdy tryb YapToText ma własne przełączniki kontekstu z aplikacji, z Twojego zaznaczenia i ze schowka, a jego model porządkowania tekstu działa na Twoim Macu, więc ten tekst nie jest wysyłany do dostawcy AI. Poza tym YapToText nie odczytuje tego, co jest na ekranie, a to realne ograniczenie, gdy odpowiedzi mają powstawać na podstawie okna, którego nie zaznaczono. Przełączniki opisuje strona pomocy o trybach.

Pobierz YapToText z Mac App StoreDo pobrania za darmo. Bez konta i bez blokad, dla macOS 14 lub nowszego na Macu z układem Apple. Kod źródłowy na GitHubie.

W skrócie

  • Czym jest. To dodatkowy tekst wysyłany do AI razem z dyktowaniem.
  • Źródła. Są nimi zaznaczony tekst, schowek i tekst z ekranu przez OCR.
  • Wymagania. Potrzebne jest włączone AI Enhancement oraz Dostępność lub Screen Recording.
  • Dokąd trafia. Do dostawcy AI danego Mode, a może też zostać zapisany w History.
  • Zalecenie. Włączaj tylko te źródła, których wymaga zadanie.

Jeśli VoiceInk zmieni sposób działania Context Awareness, zgłoś to na GitHubie (po angielsku), a zaktualizuję tę stronę. Czytam każde zgłoszenie.

Pobierz YapToText z Mac App StoreDo pobrania za darmo. Bez konta i bez blokad, dla macOS 14 lub nowszego na Macu z układem Apple. Kod źródłowy na GitHubie.

Kto to pisze. Ryleigh Newman tworzy oprogramowanie, ma trudności z pisaniem na klawiaturze i codziennie dyktuje w YapToText, aplikacji opisanej na tej stronie. Ta strona jest tłumaczeniem z angielskiego. Interfejs aplikacji i reszta witryny są po angielsku. Więcej o projekcie, po angielsku.

Poradniki

Więcej poradników, po angielsku

Źródła

Pytania

Co robi Context Awareness w VoiceInk?

Dodaje Twój zaznaczony tekst, tekst ze schowka albo tekst odczytany z aktywnego okna do żądania AI Enhancement, aby AI mogło ukształtować wynik.

Czy VoiceInk wysyła zrzuty ekranu do AI?

Nie. Odczytuje tekst okna przez OCR na Macu i wysyła ten tekst, a nie obraz.

Dlaczego kontekst ekranu w VoiceInk nie działa?

Kontekst ekranu wymaga uprawnienia Screen Recording, a zaznaczony tekst uprawnienia Dostępność. Bez nich te źródła są pomijane. Mode musi też mieć włączone AI Enhancement.

Czy Context Awareness w VoiceInk jest prywatne?

Kontekst trafia do dostawcy AI używanego przez Mode. W przypadku dostawcy w chmurze ten tekst opuszcza Twojego Maca.

Czy YapToText czyta mój ekran?

Nie. Tryb może korzystać z aplikacji, w której jesteś, z Twojego zaznaczenia i ze schowka, a porządkowanie tekstu działa na Macu.