VoiceInk Context Awareness: מה היא קוראת ב-Mac שלך, ולאן המלל הזה הולך

מאת · פורסם

Context Awareness (מודעות להקשר) נותן ל-Mode של VoiceInk להעביר למודל הבינה המלאכותית יותר מהמילים שלך. הוא יכול להוסיף את המלל שנבחר, את המלל שבלוח ואת המלל שנקרא מהמסך, כך שתשובה תתאים למכתב שעונים עליו, ושם ייכתב באותו אופן שבו הוא מופיע על המסך. הוא עובד רק עם AI Enhancement, והמלל שהוא מוסיף נשלח לספק הבינה המלאכותית שבו ה-Mode משתמש. את החלק השני כדאי לקרוא לפני שמפעילים אותו.

פיתחתי את YapToText, אפליקציית הכתבה אחרת ל-Mac, ולכן כדאי לקרוא את הדברים שלי על VoiceInk מתוך ההקשר הזה. כל עובדה כאן על VoiceInk לקוחה מהתיעוד שלה, שנקרא ב-10 באוקטובר 2026.

הורדת YapToText מה-Mac App Storeההורדה בחינם. בלי חשבון ובלי מאפיינים נעולים, ל-macOS 14 ומעלה ב-Mac עם שבב Apple. קוד המקור ב-GitHub.

המדריך הזה בשפות נוספות: English, العربية, Čeština, Dansk, Deutsch, Ελληνικά, Español, Suomi, Français, हिन्दी, Magyar, Bahasa Indonesia, Italiano, 日本語, 한국어, Norsk, Nederlands, Polski, Português, Română, Русский, Slovenčina, Svenska, ไทย, Türkçe, Українська, Tiếng Việt, 简体中文, 繁體中文

שלושת המקורות

מתוך התיעוד של VoiceInk, דף Context Awareness, שנקרא ב-10 באוקטובר 2026. בלי ההרשאה המתאימה, VoiceInk מדלגת על המקור הזה.

מקוראיך VoiceInk מקבלת אותוהרשאה
Selected Textקוראת את הבחירה הנוכחית דרך ״נגישות״ ב-macOS״נגישות״
Clipboardקוראת את המלל שבלוח כשההקלטה מתחילהאין הרשאה נוספת
Screenלוכדת את החלון הפעיל וקוראת את המלל שלו בעזרת OCR, ב-MacScreen Recording (הקלטת מסך)

הפעלה עבור Mode

  1. פותחים את Modes.
  2. עורכים Mode שה-AI Enhancement שלו מופעל.
  3. פותחים את Context Awareness.
  4. מפעילים את Selected Text, את Clipboard או את Screen.
  5. שומרים את ה-Mode.

בהנחיה מותאמת אפשר להפנות לכל מקור בעזרת תג: <CURRENTLY_SELECTED_TEXT>, <CLIPBOARD_CONTEXT> ו-<CURRENT_WINDOW_CONTEXT>. התיעוד מציע שימושים כמו ניסוח מחדש של בחירה בעזרת הוראה בקול, או ניסוח תשובה לשרשור דוא״ל שנבחר.

מה נשלח ולמי

  • לספק הבינה המלאכותית. ההקשר נשלח יחד עם בקשת ה-AI Enhancement, לספק ולמודל שבהם ה-Mode משתמש. תמלול מקומי אינו הופך את השיפור בענן למקומי.
  • מלל מהמסך, לא התמונה. ה-OCR רץ ב-Mac בעזרת מסגרת Vision של Apple, והמלל שחולץ הוא מה שנשלח, לא צילום המסך.
  • תמונת מצב עדיין נוצרת. בתחילת הקלטה חיה VoiceInk מכינה בזיכרון תמונת מצב של ההקשר. המתגים קובעים מה ייכלל בבקשה, לא אם VoiceInk קוראת אותו מקומית.
  • נשמר ב-History. בקשת הבינה המלאכותית שנשמרת ב-History יכולה להכיל את מלל ההקשר שנשלח.
  • לא בכל Mode. מצבים בלי שיפור אינם שולחים הקשר. VoiceInk Refine מתעלם ממנו, וקבצים מיובאים אינם לוכדים אותו.

מתי להשאיר אותו כבוי

העצה של VoiceInk עצמה היא להפעיל רק את המקורות שהמשימה צריכה ולחשוב איזה ספק יקבל את המלל. מקור Screen ב-Mode שרץ באפליקציית הדוא״ל שולח את המלל הנראה של כל מכתב שפתוח. אם זה חשוב, משאירים את ההקשר פעיל ב-Mode אחד לאפליקציה אחת, וה-Mode היומיומי נשאר בלעדיו. דף הפרטיות של VoiceInk מכסה את הספקים שלה, ודף ה-Modes מכסה איך בוחרים Mode לכל אפליקציה.

איך YapToText מטפלת בהקשר

על VoiceInk: מתוך התיעוד שלה, שנקרא ב-10 באוקטובר 2026. על YapToText: מתוך ההגדרות והקוד שלה.

VoiceInkYapToText
מלל נבחרכן, דרך ״נגישות״כן
הלוחכןכן
האפליקציה שבה נמצאיםדרך התאמת Modeכן, ו-Auto mode נוטה לפי האפליקציה, כמו Email ב-Mail
מלל מהמסך בעזרת OCRכן, עם Screen Recordingלא. היא אינה לוכדת את המסך
איפה רצה הבינה המלאכותיתהספק של ה-Mode, מקומי או בענןב-Mac

לכל מצב ב-YapToText יש מתגים משלו להקשר מהאפליקציה, מהבחירה ומהלוח, ומודל הניקוי שלה רץ ב-Mac, ולכן המלל הזה אינו נשלח לספק בינה מלאכותית. היא אינה יכולה לקרוא את מה שעל המסך מעבר לזה, וזו מגבלה אמיתית כשצריך לנסח תשובות מחלון שלא נבחר. דף העזרה למצבים מכסה את המתגים.

הורדת YapToText מה-Mac App Storeההורדה בחינם. בלי חשבון ובלי מאפיינים נעולים, ל-macOS 14 ומעלה ב-Mac עם שבב Apple. קוד המקור ב-GitHub.

בקצרה

  • מה זה. מלל נוסף שנשלח לבינה המלאכותית יחד עם הכתבה.
  • מקורות. מלל נבחר, לוח ומלל מהמסך בעזרת OCR.
  • דרישות. AI Enhancement מופעל, ובנוסף ״נגישות״ או Screen Recording.
  • לאן זה הולך. לספק הבינה המלאכותית של ה-Mode, ואפשר שיישמר ב-History.
  • עצה. רק המקורות שהמשימה צריכה.

אם VoiceInk משנה את אופן הפעולה של Context Awareness, אפשר לפתוח issue ב-GitHub והעמוד יעודכן. כל פנייה נקראת.

הורדת YapToText מה-Mac App Storeההורדה בחינם. בלי חשבון ובלי מאפיינים נעולים, ל-macOS 14 ומעלה ב-Mac עם שבב Apple. קוד המקור ב-GitHub.

מי כותב כאן. שמי Ryleigh Newman. פיתוח תוכנה הוא העיסוק שלי, קשה לי להקליד, ובכל יום ההכתבה שלי נעשית ב-YapToText, האפליקציה שהאתר הזה מתאר. העמוד הזה תורגם מאנגלית. הממשק של האפליקציה ושאר עמודי האתר הם באנגלית. עוד על הפרויקט, באנגלית.

מדריכים

מדריכים נוספים, באנגלית

מקורות

שאלות

מה Context Awareness ב-VoiceInk עושה?

הוא מוסיף לבקשת ה-AI Enhancement את המלל הנבחר, את מלל הלוח או את המלל שנקרא מהחלון הפעיל, כדי שהבינה המלאכותית תוכל לעצב את הפלט.

האם VoiceInk שולחת צילומי מסך לבינה המלאכותית?

לא. היא קוראת את מלל החלון בעזרת OCR ב-Mac ושולחת את המלל, לא את התמונה.

למה ההקשר מהמסך ב-VoiceInk לא עובד?

הקשר מהמסך דורש הרשאה של Screen Recording, ומלל נבחר דורש ״נגישות״. בלעדיהן המקורות האלה מדולגים. ב-Mode צריך גם AI Enhancement מופעל.

האם Context Awareness ב-VoiceInk פרטי?

ההקשר נשלח לספק הבינה המלאכותית שבו ה-Mode משתמש. עם ספק בענן, המלל הזה עוזב את ה-Mac.

האם YapToText קוראת את המסך שלי?

לא. מצב יכול להשתמש באפליקציה שבה נמצאים, בבחירה ובלוח, והניקוי שלו רץ ב-Mac.