VoiceInk Context Awareness: hvad den læser på din Mac, og hvor teksten sendes hen

Context Awareness (kontekstfornemmelse) lader en Mode i VoiceInk give sin AI-model mere end dine ord. Den kan tilføje den tekst, du har markeret, teksten i udklipsholderen og tekst aflæst fra skærmen, så et svar passer til den mail, du besvarer, eller et navn bliver stavet, som det står på skærmen. Den virker kun sammen med AI Enhancement, og den tekst, den tilføjer, går til den AI-udbyder, som den Mode bruger. Den sidste del bør du læse, før du slår funktionen til.

Jeg har udviklet YapToText, en anden dikteringsapp til Mac, så læs det, jeg skriver om VoiceInk, med det i tankerne. Alle fakta om VoiceInk her stammer fra appens egen dokumentation, læst den 10. oktober 2026.

Hent YapToText i Mac App StoreGratis at hente. Ingen konto og ingen låste funktioner, til macOS 14 eller nyere på en Mac med Apple-chip. Kildekode på GitHub.

De tre kilder

Fra VoiceInks dokumentation, Context Awareness, læst den 10. oktober 2026. Uden tilladelsen springes den kilde over.

KildeSådan får VoiceInk denTilladelse
Selected TextLæser den aktuelle markering gennem Tilgængelighed i macOSTilgængelighed
ClipboardLæser teksten i udklipsholderen, når optagelsen starterIngen ekstra
ScreenFanger det aktive vindue og læser teksten i det med OCR på din MacSkærmoptagelse

Sådan slår du den til for en Mode

  1. Åbn Modes.
  2. Redigér en Mode, som har AI Enhancement slået til.
  3. Fold Context Awareness ud.
  4. Slå Selected Text, Clipboard eller Screen til.
  5. Gem den Mode.

I en selvskrevet prompt kan du pege på hver kilde med et tag: <CURRENTLY_SELECTED_TEXT>, <CLIPBOARD_CONTEXT> og <CURRENT_WINDOW_CONTEXT>. Dokumentationen foreslår for eksempel at omskrive en markering ved at tale en instruktion eller at skrive et svar til en markeret mailtråd.

Hvad der sendes, og til hvem

  • Til AI-udbyderen. Konteksten følger med forespørgslen om AI Enhancement til den udbyder og model, som den Mode bruger. Lokal transskription gør ikke forbedringen i skyen lokal.
  • Skærmtekst, ikke billedet. OCR kører på din Mac med Apples Vision-framework, og det er den udtrukne tekst, der sendes, ikke skærmbilledet.
  • Der tages stadig et øjebliksbillede. Når en livetransskription starter, forbereder VoiceInk et kontekstbillede i hukommelsen. Kontakterne afgør, hvad der kommer med i forespørgslen, ikke om VoiceInk læser det lokalt.
  • Gemt i History. AI-forespørgslen, der gemmes i History, kan indeholde den kontekst, der blev sendt.
  • Ikke for alle Modes. Modes uden forbedring sender ingen kontekst. VoiceInk Refine ignorerer den, og importerede filer henter ingen.

Hvornår du bør lade den være slået fra

VoiceInks eget råd er kun at slå de kilder til, som en opgave har brug for, og at overveje, hvilken udbyder der modtager teksten. Kilden Screen i en Mode, der kører i din mailapp, sender den synlige tekst i den mail, der er åben. Hvis det betyder noget, så hav kontekst slået til i én Mode for én app, og lad din daglige Mode være uden. Siden om anonymitet i VoiceInk gennemgår udbyderne, og siden om Modes viser, hvordan en Mode vælges for hver app.

Sådan håndterer YapToText kontekst

VoiceInk fra dokumentationen, læst den 10. oktober 2026. YapToText fra appens egne indstillinger og kildekode.

VoiceInkYapToText
Markeret tekstJa, gennem TilgængelighedJa
UdklipsholderJaJa
Den app, du er iGennem matchning af ModeJa, og Auto mode hælder efter app, for eksempel Email i Mail
Skærmtekst med OCRJa, med SkærmoptagelseNej. Den fanger ikke skærmen
Hvor AI'en kørerUdbyderen i den Mode, lokal eller i skyenPå din Mac

Hver mode i YapToText har sine egne kontakter til kontekst fra appen, din markering og din udklipsholder, og oprydningsmodellen kører på din Mac, så teksten ikke sendes til en AI-udbyder. Appen kan ikke læse, hvad der står på skærmen, ud over det, og det er en reel begrænsning, hvis du ville have svar skrevet ud fra et vindue, du ikke har markeret. Hjælpesiden om modes gennemgår kontakterne.

Hent YapToText i Mac App StoreGratis at hente. Ingen konto og ingen låste funktioner, til macOS 14 eller nyere på en Mac med Apple-chip. Kildekode på GitHub.

Kort fortalt

  • Hvad det er. Ekstra tekst, der sendes til AI'en sammen med en diktering.
  • Kilder. Markeret tekst, udklipsholder og skærmtekst med OCR.
  • Kræver. AI Enhancement slået til, plus Tilgængelighed eller Skærmoptagelse.
  • Sendes til. AI-udbyderen i den Mode, og den kan gemmes i History.
  • Råd. Kun de kilder, en opgave har brug for.

Hvis VoiceInk ændrer, hvordan Context Awareness virker, så opret et issue på GitHub, og jeg opdaterer siden. Jeg læser dem alle.

Hent YapToText i Mac App StoreGratis at hente. Ingen konto og ingen låste funktioner, til macOS 14 eller nyere på en Mac med Apple-chip. Kildekode på GitHub.

Hvem der skriver. Ryleigh Newman udvikler software, har svært ved at skrive på tastatur og dikterer hver dag med YapToText, den app, som dette websted handler om. Siden er oversat fra engelsk. Appens brugerflade og resten af webstedet er på engelsk. Mere om projektet, på engelsk.

Vejledninger

Flere vejledninger, på engelsk

Kilder

Spørgsmål

Hvad gør VoiceInk Context Awareness?

Den føjer din markerede tekst, tekst fra udklipsholderen eller tekst aflæst fra det aktive vindue til forespørgslen om AI Enhancement, så AI'en kan forme resultatet.

Sender VoiceInk skærmbilleder til AI'en?

Nej. Den læser vinduets tekst med OCR på din Mac og sender teksten, ikke billedet.

Hvorfor virker skærmkonteksten i VoiceInk ikke?

Skærmkonteksten kræver tilladelsen Skærmoptagelse, og markeret tekst kræver Tilgængelighed. Uden dem springes de kilder over. Din Mode skal også have AI Enhancement slået til.

Er VoiceInk Context Awareness privat?

Konteksten går til den AI-udbyder, som din Mode bruger. Med en udbyder i skyen forlader teksten din Mac.

Læser YapToText min skærm?

Nej. En mode kan bruge den app, du er i, din markering og din udklipsholder, og oprydningen kører på din Mac.