מילוי-פערים (Inpainting)
הגדרה
מילוי-פערים הוא שימוש ב-AI כדי למלא באופן משכנע חלק חסר או מסומן בתמונה — הסרת אובייקט לא-רצוי, או שחזור פינה פגומה בתמונה ישנה.
מה זה מילוי-פערים, והמקור המפתיע במאה ה-18
מילוי-פערים (Inpainting) הוא שימוש ב-AI כדי למלא באופן משכנע חלק חסר או מסומן בתמונה — הסרת אובייקט לא-רצוי, או שחזור פינה פגומה בתמונה ישנה. המונח עצמו הרבה יותר ותיק מהבינה-המלאכותית: הוא שאול משדה-שיקום-האמנות, ששם תיאר כבר במאה ה-18 את מילוי-החללים החסרים בציורי-שמן פגומים — הרסטורטור הוונציאני פייטרו אדוארדס (1744–1821) היה מהראשונים שקבעו עקרונות-שיטתיים לתהליך, וב-1930 גיבש הרסטורטור הלמוט רוהמן כללים מקצועיים שעדיין משפיעים על התחום.
המנגנון הדיגיטלי: משאילת-מרקם למודלים-מבוססי-דיפוזיה
בגרסה הדיגיטלית, המשתמש מסמן אזור בתמונה (למשל אדם ברקע), והמודל "ממלא" את המקום הזה בתוכן שמתאים סביבתית לשאר התמונה — כאילו האזור המקורי מעולם לא נראה אחרת. שיטות דיגיטליות מוקדמות (עוד לפני עידן-הלמידה-העמוקה) עבדו על-ידי "שאילת" מרקם או מבנה מגבולות-האזור החסר פנימה; שיטות AI מודרניות, מבוססות-דיפוזיה בעיקר, לומדות ממיליוני דוגמאות כדי להבין הקשר סמנטי — לא רק מרקם חוזר, אלא מה "הגיוני" שיהיה שם.
Magic Eraser: הדוגמה שכולם מכירים
דוגמה קונקרטית ונפוצה במיוחד: Magic Eraser, פיצ'ר שהציגה Google באירוע-ההשקה של סדרת הטלפונים Pixel 6 באוקטובר 2021, מאפשר למשתמש פשוט לסמן באצבע תייר-זר או פח-אשפה שנקלעו לתמונה — והטלפון מוחק אותם ומשלים את הרקע אוטומטית, ישירות באפליקציית Google Photos, בלי צורך בתוכנת-עריכה נפרדת. הפיצ'ר הפך לאחת הדוגמאות הנפוצות ביותר שאנשים לא-טכניים נתקלים בהן ליכולות-AI מעשיות בחיי-היום-יום, גם בלי לדעת לכנות אותה "Inpainting".
Content-Aware Fill: הגרסה המוקדמת מ-2010
מילוי-פערים נפוץ בעריכת-תמונות מקצועית ובאפליקציות-צרכן פשוטות כאחד — מ"מחיקת אדם מתמונה" ועד שחזור תמונות היסטוריות פגומות בקנה-מידה גדול, כמו פרויקטים לשחזור ארכיוני-תצלומים ישנים שנפגעו בקיפולים או בכתמי-לחות. גרסה מוקדמת ופחות-חכמה של הרעיון הייתה מוכרת עוד לפני עידן-הבינה-המלאכותית הגנרטיבית — פיצ'ר "Content-Aware Fill" בתוכנת Photoshop, משנת 2010, כבר אפשר למחוק אובייקטים ולמלא את המקום אוטומטית, אם כי בדיוק נמוך משמעותית מהגרסאות מבוססות-הדיפוזיה של היום.
הקשר ל-Outpainting
היכולת קשורה הדוקות להרחבת-תמונה (Outpainting) — אותו עיקרון-טכני בדיוק, רק מחוץ לגבולות התמונה המקורית במקום בתוכה.
📬 הגיליון השבועי של Wiki-AI
פעם בשבוע, ביום ראשון: שלושת הדברים החשובים שקרו בעולם הבינה המלאכותית, בעברית פשוטה, וערכים חדשים באנציקלופדיה. לגיליונות
שאלות נפוצות ❓
מאיפה מגיע המונח "Inpainting", ומי היה מהראשונים לעסוק בו?
המונח שאול משדה-שיקום-האמנות, ששם תיאר כבר במאה ה-18 מילוי-חללים חסרים בציורי-שמן פגומים; הרסטורטור הוונציאני פייטרו אדוארדס (1744–1821) היה מהראשונים שקבעו עקרונות-שיטתיים לתהליך.
מה עושה Magic Eraser של גוגל?
פיצ'ר שהציגה Google באירוע-ההשקה של Pixel 6 באוקטובר 2021, ומאפשר למשתמש לסמן באצבע אובייקט לא-רצוי בתמונה — כמו תייר-זר או פח-אשפה — והטלפון מוחק אותו ומשלים את הרקע אוטומטית באפליקציית Google Photos.
מה ההבדל בין Inpainting ל-Outpainting?
אותו עיקרון-טכני בדיוק — מילוי-תוכן משכנע באמצעות AI — רק ש-Inpainting פועל בתוך גבולות התמונה הקיימת, ו-Outpainting פועל מחוץ להם, בהרחבת התמונה מעבר לגבולותיה המקוריים.
איך שיטות-AI מודרניות שונות משיטות-דיגיטליות מוקדמות?
שיטות מוקדמות, כמו Content-Aware Fill בפוטושופ (2010), "שאלו" מרקם או מבנה מגבולות-האזור החסר; שיטות מודרניות, מבוססות-דיפוזיה בעיקר, לומדות ממיליוני דוגמאות כדי להבין הקשר סמנטי — מה "הגיוני" שיהיה שם, לא רק מרקם חוזר.