ברוכים הבאים לקורס "אמנות הפעפוע – קורס בניית תמונות בבינה מלאכותית בעזרת Stable Diffusion"
הסרטונים להלן ילמדו אתכם כיצד ליצור תמונות איכותיות בעזרת טכנולוגיה של בינה מלאכותית.
תחום היצירה האמנותית בעזרת בינה מלאכותית פרץ לעולם בשלהי 2022, עם הצגתה של DALL·E 2. טכנולוגיה שאפשרה לכתוב שורת תיאור טקסטואלי בשפה טבעית כקלט ולקבל כפלט תמונה קרובה יחסית לתיאור הטקסטואלי שניתן.
במקביל קמו מודלים חישוביים נוספים המאפשרים יצירה דומה. הבולטים שבהם הם MidJourney ו-Stable Diffusion.
כל המודלים מבוססים על סריקה ולימוד של מיליארדי תמונות הקיימות ברשת האינטרנט ובניית מודל חישובי המסוגל להבין את הטקסט הנכתב ולהרכיב על סמך המידע הגדול שהמערכות אומנו מנו, תמונות שיתאמו ככל האפשר את התיאור.
קורס זה יעסוק בעיקר במודל Stable Diffusion, בעיקר משום שהוא מבוסס על קוד פתוח, זמין מאוד לשימוש על ידי כולם וניתן גם להתקנה והרצה ממחשבים אישיים רבים (נדרש כרטיס גראפי הגון).
כל הדוגמאות והתרגולים ניתנים לביצוע על גבי שירותי ושרתי ענן, אליהם יש קישורים בדף הזה ובתיאורי הסרטונים. רוב (אם לא כל) התרגילים ניתן לבצע בחינם!
תרצו עוד, ישנם שירותים (גם אותם אני מפרט) שממשיכים להיות חינמיים, ואחרים בתשלום זעום יחסית.
כדי שתוכלו להתאמן ולבצע את מרבית ההדגמות , נדרש מחשב אישי, לא חשוב מאיזו עדה, וחיבור טוב לאינטרנט. ניתן לבצע את כל התרגילים ללא צורך בהתקנה כלשהי על המחשב האישי.
עד כמה שידיעתי משגת, נכון להיום, 11 בינואר 2023, אוסף הסרטונים הזה הוא אחד המקיפים ביותר שיש בעברית בנושא.
מאחל לכם הנאה וזמן איכות. תראו את היצירות שלכם ובעיקר הפיצו את הבשורה!
פרק 1 הקדמה
הקדמה קצרה לקורס הסבר קצר מהי בניית תמונות באמצעות בינה מלאכותית, מה נלמד בקורס ולמה בחרתי ב-Stable Diffusion ככלי שאתו נעבוד.
פרק 2 מתחילים
הסבר קצרצר על מודל -Stable Diffusion ותחילת עבודה אתו. יצירת התמונות הראשונות מהי ההכוונה – Prompt, ממה היא מורכבת, כתיבת נושא, תיאור וסגנון. כתובת אתר של Stable Diffusion: https://stablediffusionweb.com/
פרק 3 כתיבת הכוונות – Prompts מיטבית
אלברט אינשטיין אמר שאם היתה לו שעה לפתור בעיה שחייו תלויים בה, הוא היה עובד במשך חמישים וחמש דקות על ניסוח השאלה, כי אז.. אחרי שהשאלה מנוסחת כמו שצריך היה לוקח לו חמש דקות לפתור את הבעיה.
ככה גם עם הפרומפטים!
בפרק הקודם התחלנו להבין שהמפתח ליצירת תמונות שישביעו את רצוננו הוא כתיבת הכוונה – Prompt מפורט ומדוייק ככל האפשר. בפרק הזה נדון בתת החלקים של פרומפט, החל מהתיאור, דרך הסנון, מילות מפתח מתאימות, התאמה בין חלקי התיאור השונים. לבסוף נפגש עם מנוע בניית פרומפטים. https://promptomania.com/
פרק 4 Dream Studio
בפרק זה נכיר את אתר Dream Studio שפועל על בסיס טכנולוגיית Stable Diffussion.
מנוע זה מאפשר שליטה מוגברת במרכיבים רבים של יצירת התמונות.
פרק 5 עבודה עם תמונות
בפרק זה נמשיך את היכרותנו עם אתר Dream Studio שפועל על בסיס טכנולוגיית Stable Diffussion.
נכיר את אחת התכונות החזקות של האתר והיא עבודה על תמונות קיימות שלכם ושילובן בהכוונות – פרומפטים שאתם כותבים.
מחולל פרומפטים
פרק 6 התקנות עצמאיות
בסרטון זה אני מראה מספר אפשרויות להרצת מודל Stable Diffusio על גבי מחשב אישי או על מחשב ענן. על מנת להריץ על מחשב אישי יש להצטייד במחשב אישי בעל כרטיס גרפי של NVIDIA בעל ארבעה ג׳יגה-בייט לפחות. מאידך ישנה אפשרות להתקנה מהירה יחסית על מחשבי ענן והרצה במחיר נמוך יחסית הבשוואה לעלות כוללת של מחשב. הסביבות המדוברות:
Invoke AI https://invoke-ai.github.io/InvokeAI/
סביבות למקינטוש https://aituts.com/the-best-way-to-ru… שרתי ענן Colab https://colab.research.google.com/
סביבת Automatic1111 ל- Colab https://colab.research.google.com/git…
סביבת InvokeAI ל-Runpod (מומלץ ומהיר מאוד) https://www.runpod.io/blog/invoke-ai-…
פרק 7 מתחת למכסה המנוע
בפרק ננסה להבין, עד כמה שזה אפשר מבלי לסיים תואר אקדמי במתמטיקה ומדעי המחשב, כיצד כל העסק הזה עובד.
פרק 8 פוטושופ ו-Stable Diffusion
בסרטון זה אני סוקר שני פלאגינים לפוטושופ שמאפשרים יצירת תמונות בינה מלאכותית עם מודלים של Stable Diffusion Alkaid-Art
מדריך למשתמש והוראות הרשמה והתקנה https://alkaidart.gitbook.io/user-manual-en/
יש להוריד את הפלאגין מכאן
https://drive.google.com/drive/folders/1rrjFsduE45eHahXgA_bJaEIR0quYjf2J
קוד הפעלה נמצא בדיסקורד כאן
תוסף שני – The Stability Photoshop Plugin
ניתן להוריד את התוסף באתר שלו https://christiancantrell.com/#ai-ml
או בממשק התוספים של Adobe בפוטושופ 22, 23.
על מנת לעבוד עם התוסף עליכם לפתוח חשבון, אם עדיין לא עשיתם זאת ב-Dream Studio https://beta.dreamstudio.ai/
משם – בחשבון – Account, שלכם תוכלו לקחת את הקוד של ה-API-Key
פרק 9 מחשבות על יצירת תמונות באמצעות בינה מלאכותית
בפרק אחלוק אתכם את המחשבות שלי לגבי:
- האם זו אמנות בכלל?
- האם זה מסכן מקומות עבודה?
- האם זה מסכן חברות שונות
- מהם ההיבטים האתיים
ועוד…
פרק 10 קישורים מעניינים
מספר אתרים מעניינים ומפתיעים שיכולים להעשיר ולהועיל בכל הקשור ביצירת תמונות בבינה מלאכותית. תיהנו.
פרק 11 הפוך גוטה!
עד עתה ראינו איך טקסט (פרומפט) הופך לתמונה. האם אפשר גם ההפך? שנראה למנגנון כלשהו תמונה והוא ייצור פרומפט שמתאר אותה בצורה טובה?
מסתבר שכן! היישום: https://replicate.com/pharmapsychotic/clip-interrogator
מגרש משחקים חינמי לייצור תמונות במודלים שונים, כולל Open Journey:
פרק 12 DreamUp.AI
אפליקציית – יישום דפדפן ליצירת תמוונות בעזרת בינה מלאכותית.
האפליקציה בחינם (לעת עתה) וניתן לתרום להמשך פעילותה, 30% הולך למיזמי אמנות במרחב הציבורי.
DreamUp.AI מאפשר יצירת תמונות בארבה מודלים של Stable Diffusion, כאשר מודל ברירת המחדל הוא Open Journey, מודל שאומן מתמונות שיוצרו ב-Mid Journey, ולכן התוצאות שלו בהתאם…
כתובת האפליקציה/יישום: https://app.dreamup.ai/
פרק 13 תגדיל לי בשקל תשעים – הגדלת תמונות
בסרטון זה אעסוק באחד השימושים החיוביים יותר של כל מה שקשור בבניית תמונות בבינה מלאכותית: הגדלת תמונות.
התמונות שיישומי הבינה המלאכותית מייצרות בדרך כלל הן קטנות יחסית ובוודאי לא ראויות לדפוס. הגדלתן באמצעים הותיקים – גורמת לטשטוש שלהן. הייתרון בבניה המלאכותית שהיא מסוגלת ״להבין״ את תוכן התמונה והמאפיינים שלה ולהתאים לפיכך מודל הגדלה שיצור את המידע החסר בצורה טובה יותר.
על מנת להדגים את התהליך אני משתמש בסרטון זה בממשק משתמש Automatic 1111 ל-Stable Diffusion ומריץ אותו על שרת – ענן RunDiffusion. השימוש בשרות זה עולה כחצי דולר לשעה ולדעתי יעיל מאוד: https://rundiffusion.com/
פרק 14 Leonardo.AI – יותר מזה אנחנו לא צריכים
סביבה מושלמת ליצירת תמונות בבינה מלאכותית הכוללת גם אפשרות אימון מודל משלכם, השלמת תמונות והחלפת תוכן בתמונה. נדרש רישום והמתנה לקבלה (כמה ימים) ואחר כך יש גישה חופשית לכל משאבי הכלי. https://leonardo.ai/
פרק 15 התקנות על גבי מחשב אישי
בסרטון זה אני מדגים מחשב אישי עליו מותקנות שתי סביבות של יצירת תמונות בבינה מלאכותית:
Automatic 1111
InvokeAI
התקנת סביבת יצירת תמונות בבינה מלאכותית על גבי מחשב אישי מאפשרת פרטיות ביצירה וגם אין כל צנזורה על היצירה עצמה. שתי הסביבות ניתנות להתקנה בקלות יחסית, דורשות מקום נרחב יחסית בכונני האחסון (עשרות ג'יגה בייט לכל התקנה) ומאפשרות עבודה עם מודלים רבים המותאמים לצרכים שלכם וכן גם עם תוספי אימון למודלים משלכם, ועריכת וידאו.
התקנת Automatic 1111 ניתנת להורדה מכאן: https://github.com/EmpireMediaScience…
התקנת InvokeAI ניתנת להורדה מכאן:
https://invoke-ai.github.io/InvokeAI/…
פרק 16 שימוש ב-Chat GPT לכתיבת פרומפטים
הנה לכם דילמה. מחולל הטקסטים ChatGPT, מאומן על מידע שנכון לשלהי 2021. מחוללי התמונות בבינה מלאכותית הגיעו לתודעה בשלהי 2022. כך שאם תשאלו למשל את הצ'אט כיצד פועל מחולל תמונות בבינה מלאכותית, סביר להניח (ובדקתי) שלא תקבלו תשובה מהימנה. מעבר לכך, הצ'אט יודע המון דברים אחרים כמו למשל המון ידע על צילום, כל צילום. וגם, אם מסבירים לו דברים הוא מסוגל לנתח את המידע הזה ולעשותאתו דברים חדשים. בסרטון הזה אני מדגים את שני הדברים: גם מסביר לצ'אט מה הרעיון בכתיבת פרומפטים למחוללי תמונות בבינה מלאכותית, ומבקש ממנו בתמורה פרומפטים, וגם מבקש ממנו על סמך הידע הנרחב שיש לו בצילום לייצר לי פרומפטים לצילום של נושא מסויים….
פרק 17 ממשק ComfyUI, לבניית תהליכי יצירת תמונות
פרק 18 יצירת השם שלכם מחומרים שונים
פרק 19 סדנת יצירת תמונות בבינה מלאכותית לאמני מידברן
הרעיון לייצר השראה ליצירות אמנות שיוצגו בסופו של תהליך במידברן.
פרק 20 סקירת מודל SDXL החדש והדגמה על ComfyUI
פרק 21 – מתחת למכסה המנוע מבוא למבנה מערכת ליצירת תמונות בבינה מלאכותית
פרק 22 – סדנת יצירת תמונות בבינה מלאכותית לתלמידים במסגרת קהילת הוריזון, מטעם קרן רמון וסוכנות החלל הישראלית.
הסדנה נעשית בעזרת https://playgroundai.com/
שמאפשרת (ביום כתיבת התוכן הזה , יצורת 1000 תמונות ביום בחינם!
פרק 23 – סדנת יצירת תמונות בבינה מלאכותית לתלמידים במסגרת קהילת הוריזון, מטעם קרן רמון וסוכנות החלל הישראלית. – חלק ב'
הסדנה נעשית בעזרת https://playgroundai.com/
שמאפשרת (ביום כתיבת התוכן הזה , יצורת 1000 תמונות ביום בחינם!
מקורות וקישורים
חוברת עזר מתעדכנת כל הזמן
Stable Diffusion – משם נתחיל ליצור
Dream Studio – לשליטה גדולה יותר
Mage – יצירה ללא צנזורה
Lexica- לקסיכון הכוונות – פרומפטים ענק
מתמונה לפרומפט – CLIP Interrogator
מערבב התמונות
וריאציות לתמונות
תמונות מדברות ושרות (לפי סרטים)
אנשים שלא קיימים – מחולל תמונות של אנשים שלא קיימים
Dream-Up מחולל תמונות חינמי בסגנון עדות MidJourney
Dream Like – עוד מחולל שבשימוש סביר יכול להיות חינמי
BlueWilowAI – ממשק זהה ל-MJ עם טוויסט התאמת המודל לפרומפט (בחינם לעת עתה)
תגדיל לי ב-1.90 ש"ח – כלי להגדלת תמונות מבוסס בינה מלאכותית
מחולל פרומפטים ל-MJ (יכולים להתאים גם ל SD)
מאגר מודלים (כולל NSFW)
Run Diffusion – שרות הרצה בתשלום של ממשקי משתמש Automatic1111 ו-InvokeAI
Astria – יצירת מודלים מתמונות שלכם לשימוש במערכות אחרות (בתשלום)
Playground.AI – סביבה מושלמת וחינמית (1000 תמונות ביום)
Leonardo.AI – סביבה חינמית עשירה ליצירת תמונות ואפילו מודלים משלכם
SkyBox – יצירת פנורמה תלת ממדית מבוססת בינה מלאכותית
חוברת מצויינת ללימוד כל נושא הפרומפטים לסוגיהם
Plask.AI מעצב פוזות
יוצר צלליות
מילים וצלליות חבויות בתמונה