VoiceInk Context Awareness: hva den leser fra Macen din, og hvor teksten går

Context Awareness lar en Mode i VoiceInk gi AI-modellen mer enn bare ordene dine. Den kan legge til teksten du har markert, teksten på utklippstavlen og tekst lest fra skjermen, slik at et svar passer til e-posten du svarer på, eller et navn blir stavet slik det står på skjermen. Den virker bare sammen med AI Enhancement, og teksten den legger til går til den AI-leverandøren som den Mode bruker. Den siste delen er verdt å lese før du slår funksjonen på.

Jeg har utviklet YapToText, en annen dikteringsapp for Mac, så ha det i tankene når du leser det jeg skriver om VoiceInk. Alle fakta om VoiceInk her kommer fra appens egen dokumentasjon, lest 10. oktober 2026.

Last ned YapToText i Mac App StoreGratis å laste ned. Ingen konto og ingen låste funksjoner, for macOS 14 eller nyere på en Mac med Apple-chip. Kildekode på GitHub.

De tre kildene

Fra VoiceInks dokumentasjon, Context Awareness, lest 10. oktober 2026. Uten tillatelsen hoppes den kilden over.

KildeSlik henter VoiceInk denTillatelse
Selected TextLeser det gjeldende utvalget gjennom Tilgjengelighet i macOSTilgjengelighet
ClipboardLeser teksten på utklippstavlen når opptaket starterIngen ekstra
ScreenTar et bilde av det aktive vinduet og leser teksten med OCR, på MacenSkjermopptak

Slik slår du den på for en Mode

  1. Åpne Modes.
  2. Rediger en Mode som har AI Enhancement slått på.
  3. Utvid Context Awareness.
  4. Slå på Selected Text, Clipboard eller Screen.
  5. Lagre Mode.

I en egen prompt kan du peke på hver kilde med en tagg: <CURRENTLY_SELECTED_TEXT>, <CLIPBOARD_CONTEXT> og <CURRENT_WINDOW_CONTEXT>. Dokumentasjonen foreslår bruk som å skrive om et utvalg ved å si en instruksjon, eller å skrive et svar til en markert e-posttråd.

Hva som sendes, og til hvem

  • Til AI-leverandøren. Konteksten følger med forespørselen om AI Enhancement, til leverandøren og modellen som den Mode bruker. Lokal transkripsjon gjør ikke forbedring i skyen lokal.
  • Skjermtekst, ikke bildet. OCR kjører på Macen med Apples rammeverk Vision, og det er den uthentede teksten som sendes, ikke skjermbildet.
  • Et øyeblikksbilde tas likevel. Ved starten av et levende opptak lager VoiceInk et kontekstbilde i minnet. Bryterne avgjør hva som tas med i forespørselen, ikke om VoiceInk leser det lokalt.
  • Lagret i History. AI-forespørselen som lagres i History, kan inneholde kontekstteksten som ble sendt.
  • Ikke for alle modusene. Modusene uten forbedring sender ingen kontekst. VoiceInk Refine ignorerer den, og importerte filer henter ingen.

Når du bør la den være av

VoiceInks eget råd er å slå på bare de kildene en oppgave trenger, og å tenke på hvilken leverandør som får teksten. Kilden Screen i en Mode som kjører i e-postappen din, sender den synlige teksten i den e-posten som er åpen. Hvis det betyr noe, kan du ha konteksten på i én Mode for én app og la hverdagsmodusen din være uten. Siden om personvern i VoiceInk tar for seg leverandørene, og siden om Modes viser hvordan en Mode velges per app.

Slik håndterer YapToText kontekst

VoiceInk fra dokumentasjonen, lest 10. oktober 2026. YapToText fra appens egne innstillinger og kildekode.

VoiceInkYapToText
Markert tekstJa, gjennom TilgjengelighetJa
UtklippstavlenJaJa
Appen du er iGjennom matching av ModeJa, og Auto mode heller mot appen, for eksempel Email i Mail
Skjermtekst med OCRJa, med SkjermopptakNei. Den tar ikke opp skjermen
Hvor AI-en kjørerLeverandøren i Mode, lokalt eller i skyenPå Macen

Hver modus i YapToText har egne brytere for kontekst fra appen, utvalget ditt og utklippstavlen, og oppryddingsmodellen kjører på Macen din, så den teksten sendes ikke til en AI-leverandør. Den kan ikke lese hva som står på skjermen utover dette, og det er en reell begrensning hvis du ville ha svar skrevet ut fra et vindu du ikke har markert. Hjelpesiden om modusene tar for seg bryterne.

Last ned YapToText i Mac App StoreGratis å laste ned. Ingen konto og ingen låste funksjoner, for macOS 14 eller nyere på en Mac med Apple-chip. Kildekode på GitHub.

Kortversjonen

  • Hva det er. Ekstra tekst som sendes til AI-en sammen med en diktering.
  • Kilder. Markert tekst, utklippstavlen og skjermtekst med OCR.
  • Krever. AI Enhancement på, pluss Tilgjengelighet eller Skjermopptak.
  • Går til. AI-leverandøren i Mode, og den kan lagres i History.
  • Råd. Bare de kildene en oppgave trenger.

Hvis VoiceInk endrer hvordan Context Awareness virker, kan du opprette et issue på GitHub (på engelsk), så oppdaterer jeg denne siden. Jeg leser alle.

Last ned YapToText i Mac App StoreGratis å laste ned. Ingen konto og ingen låste funksjoner, for macOS 14 eller nyere på en Mac med Apple-chip. Kildekode på GitHub.

Hvem som skriver. Ryleigh Newman utvikler programvare, har vansker med å skrive på tastatur og dikterer hver dag med YapToText, appen dette nettstedet handler om. Siden er oversatt fra engelsk. Appens grensesnitt og resten av nettstedet er på engelsk. Mer om prosjektet, på engelsk.

Veiledninger

Flere veiledninger, på engelsk

Kilder

Spørsmål

Hva gjør Context Awareness i VoiceInk?

Den legger til teksten du har markert, teksten på utklippstavlen eller tekst lest fra det aktive vinduet i forespørselen om AI Enhancement, slik at AI-en kan forme resultatet.

Sender VoiceInk skjermbilder til AI-en?

Nei. Den leser teksten i vinduet med OCR på Macen og sender den teksten, ikke bildet.

Hvorfor virker ikke skjermkonteksten i VoiceInk?

Skjermkontekst krever tillatelsen Skjermopptak, og markert tekst krever Tilgjengelighet. Uten dem hoppes de kildene over. Modusen må også ha AI Enhancement slått på.

Er Context Awareness i VoiceInk privat?

Konteksten går til AI-leverandøren som modusen bruker. Med en leverandør i skyen forlater den teksten Macen din.

Leser YapToText skjermen min?

Nei. En modus kan bruke appen du er i, utvalget ditt og utklippstavlen, og oppryddingen kjører på Macen.