בדיוק כשחשבתם שאתם יכולים לקחת אוויר מה-AI, - אבל לא עם סאגת TikTok הבלתי נגמרת. בתערוכת חדשנות בינה מלאכותית נוצצת בשנג'ן, Volcano Engine של ByteDance חשף שני דגמים חזקים, , . מתמקדת ביצירת סרטונים דינמיים ואיכותיים מהנחיות טקסטואליות וויזואליות - חשבו על זה כעל הג'יני שמעניק משאלות ליצרני וידאו. צוללות עמוק לתוך מחוזות האנימציה התלת-ממדית והעיבוד האמנותי, ומספקת את אלה שרוצים לגרום לוויזואליה שלהם לצוץ כמו קונפטי במסיבה. ByteDance נכנס לאור הזרקורים PixelDance ו- Seaweed עם הבטחה כבדה לזעזע את נוף יצירת הווידאו PixelDance אצות יש טכנולוגיה רצינית שהוזרמה למודלים האלה, וזה בגלל שקהל היעד האמיתי שלהם הוא לא השכן שלך מדור ה-Z הסמוך למשפיענים - זה יוצרים ובתי הפקה רציניים. זהו עדכון עסיסי מבית Bytedance. המשך לקרוא כדי לגלות מדוע. מה שהם לֹא אומר לך ByteDance חיזר אחרי AI כבר זמן רב. עוד כשהחלו לפתח המלצות אלגוריתמיות, רובנו קישרנו את הקיצור "AI" עם "Adobe Illustrator". אפשר להניח שהם מתעמקים ב-AI עבור פעולות מול צרכנים, אבל זה מה שהם רוצים שתאמין. הם (נוטה לתביעות משפטיות, בדיקת נתונים והרבה מסמכים ביורוקרטיים) . מהמרים שבינה מלאכותית תעביר אותם מהפלטפורמה החד פעמית לכלי חיוני העתיד של ByteDance אינו טמון בהאשטאגים חולפים והכנסות מפרסומות, אלא בזרועות המוצקות והאמינות של ייצור רציני - המיועד לצמיחה וחדשנות. . מודל ממוקד ארגוני באמצעות מעבר אסטרטגי במיקוד ליישומים מקצועיים, ByteDance לא רק ישרוד את הסערה; היא תשגשג על ידי הגדרה מחדש של תפקידה במערכת האקולוגית הטכנולוגית PixelDance: From Mind To Magic PixelDance מבטיחה להיות . המאפיינים העיקריים שלו כוללים: אותה סוכנות שיכולה לקחת את המשפטים החצויים והקשקושים הסמי-קוהרנטיים שלך ולהגביר בדיוק את מה שהיה לך בראש קלט טקסט ותמונה משולב בניגוד לדגמים מסורתיים של יצירת וידאו, PixelDance מאפשרת למשתמשים לספק גם טקסט וגם תמונות (במיוחד את הפריימים הראשונים והאחרונים). זה אומר שאתה מקבל סרטון שמתחיל ומסתיים בדיוק כפי שדמיינת. : זה במאי שממש מקשיב לרעיונות שלך ומביא אותם לחיים. ולא מדבר בחזרה. תקציר הדיוט ארכיטקטורת מודל דיפוזיה סמויה תינוק זה פועל על מודל דיפוזיה סמוי, תוך שימוש . כניסות תמונה מוזנות דרך VAE, בשילוב עם משתני וידאו סמויים כדי להבטיח תנועה חלקה ועקביות. במקודדים אוטומטיים וריאציוניים (VAE) ומקודד טקסט זהו בלנדר היי-טק שמגביר את חלומות הווידאו שלך ללא פיסות גושים. תקציר ההדיוט: קטעי וידאו רציפים PixelDance יכול ליצור קטעי וידאו רציפים תוך . הוא משתמש בפריים האחרון של קטע אחד בתור הפריים הראשון של הבא. שמירה על קוהרנטיות זמנית להיפרד מהגזרות המביכות האלה. תקציר הדיוט: עריכת וידאו ב-Zero Shot תכונה זו מאפשרת למשתמשים לערוך סרטונים ללא צורך בהדרכה ספציפית. אתה יכול להנחות את יצירת הסרטון על ידי התאמה רק של הפריימים הראשונים והאחרונים. אתה יכול לערוך מחדש סרט שובר קופות שלם רק על ידי התאמת סצינות הפתיחה והסיום - קסם קולנועי טהור. תקציר הדיוט: תמיכה בסגנון רחב טווח משחור-לבן ועד אנימציה תלת-ממדית וסגנונות ציור סיניים מסורתיים, PixelDance תומך במגוון רחב של אסתטיקה, כולל יחסי גובה-רוחב כמו 1:1 ו-3:4. זו לא אנה ווינטור, או סנוב בסגנון אחר. לדבר הזה אין העדפות אמנותיות, רק ארסנל של כלים. תקציר הדיוט: מערכי נתונים של הדרכה PixelDance , מערך נתונים של כ-10 מיליון סרטונים קצרים (אורך ממוצע: 18 שניות) ברזולוציה של 336 x 596. בנוסף, הם השתמשו כדי להבטיח פלט באיכות גבוהה. הוכשר על WebVid-10M ב-500,000 קטעי וידאו ללא סימן מים הוא צפה בעוד סרטונים שאי פעם תראה. זו האנציקלופדיה של הפניות קולנועיות. סמוך על המקצועיות שלו. סיכום הדיוט: אצות: האלכימאי העריכה אצות היא התשובה של ByteDance למצוקות העריכה שפוקדות את היוצרים. עוצב כדי , Seaweed משתמש בבינה מלאכותית כדי עם תכונות מרשימות: להשלים את PixelDance לייעל את תהליך העריכה עיבוד תלת מימד אצות משתמשת בטכניקות רינדור מתקדמות כדי ליצור ויז'ואלים שאינם רק שטוחים אלא בעלי עומק וריאליזם, מה שהופך אותם למתאימים לאנימציות וביטויים אמנותיים באיכות גבוהה. יש לך את אולפן האנימציה של פיקסאר בהישג ידך. סיכום הדיוט: זיהוי חיתוך אינטליגנטי באמצעות אלגוריתמים מתוחכמים, Seaweed , ומאפשרת חיתוכים מהירים מבלי לאבד את הנרטיב. מזהה רגעי מפתח בצילומים שלך עורך אישי שיכול להצביע על רגעי הזהב בצילומים הגולמיים שלך. מָהִיר. ממש מהר. תקציר הדיוט: סיווג צבע ואפקטים משופרים כלי זה הופך את תיקון הצבע לאוטומטי ומחיל אפקטים סגנוניים כדי להבטיח שהסרטון שלך ייראה מלוטש ללא ההתאמות הידניות המייגעות. אתה יכול לקבל צבעים וסגנונות שאפילו באז לורמן היה מאשר. גם אם אתה עיוור צבעים. תקציר הדיוט: ממשק ידידותי למשתמש עם סיוע בינה מלאכותית אצות משלבות יכולות בינה מלאכותית מתקדמות עם ממשק פשוט, מה שהופך אותה לנגישה גם למי שאינו מתמצא בטכנולוגיה. זה כמו לקבל פרארי אבל עם אישור לומד - נסיעות חלקות לכולם. תקציר הדיוט: מחשבות אחרונות: בניין לעלית הטכנולוגית PixelDance ואצות הם לא רק כלים; הם הכרטיס של ByteDance למגרש משחקים חדש ומתוחכם יותר שבו ההימור גבוה והתחרות עזה. בעוד שרובם מסתפקים במתן מענה ליוצרים מזדמנים שמחפשים תבניות ומגבירים תוכן "טוב מספיק" עבור מצגת החתונה של בן דודך, ByteDance מנצח את ה-A-listers. משמעות הדבר היא שהם נותנים עדיפות , מביטים ביוצרי סרטים, אנימטורים, סוכנויות שיווק ועסקים שזקוקים לסרטונים מלוטשים ומתוחכמים, הבולטים בשוק תוכן רווי. ByteDance מאותת בהתרסה שהוא לא מעוניין להפוך לסרטון ה-Canva של AI. הם מכוונים למשהו שדומה יותר להיברידית Pixar-ILM מונעת בינה מלאכותית. לאיכות המשתמשים שלהם על פני כמות זה חכם. ממש חכם. אבל לא בלי סיכונים. אסטרטגיית תמחור אגרסיבית: חרב פיפיות? אסטרטגיית התמחור האגרסיבית שלהם, - נועדה לשבש את השוק. זוהי קריאת צפירה לארגונים קטנים ובינוניים (SME) ויוצרי אינדי, שיכולים כעת לגשת לכלים מתקדמים שפעם חשבו שהם אינם בהישג יד. ב-0.002 דולר לאסימון - בהשוואה ל-0.03 דולר לאסימון של OpenAI אבל העלות הנמוכה לאסימון היא הימור מסוכן. ByteDance יכולה להרשות לעצמה לשחק את המשחק הזה עכשיו, אבל , במיוחד אם העלות של רכישת נתונים ותשתית גדלה בצורה לא פרופורציונלית. למרות שהתמחור הראשוני עשוי למשוך לקוחות, שמירה על זה מבלי לוותר על איכות או חדשנות יכולה להיות הליכה על חבל דק. שמירה על מחירים אלה לטווח ארוך עשויה להיות מאתגרת תחרות של Unity ו-Unreal Engine ByteDance נכנסת שהן חלוצות בתחומי עיבוד תלת מימד, אנימציה ואפילו יצירת סרטים בזמן אמת, עם קהילות גדולות ונאמנות ומשאבים נרחבים. Unity התקדמה בהפקה וירטואלית ובסיפורים בזמן אמת, בעוד שהעדכונים האחרונים של Unreal Engine הפכו את הראש עם יכולות העיבוד ההיפר-ריאליסטיות שלהם. שניהם משלבים כעת תכונות בינה מלאכותית כדי לשפר את ההיצע שלהם, מה שהופך אותם למתחרים ישירים ליכולות הרינדור התלת מימד ויכולות הווידאו האינטראקטיביות של Seaweed. לשדה קרב שכבר נשלט על ידי ענקיות כמו Unity ו-Unreal Engine האתגר של ByteDance יהיה לשכנע יוצרים ש-PixelDance ו- Seaweed מציעים משהו שהפלטפורמות האלה לא יכולות - בין אם זה אינטגרציה טובה יותר עם כלים קיימים, זרימות עבודה מהירות יותר או איכות פלט מעולה. המערכות האקולוגיות המבוססות של Unity ו-Unreal Engine גם נותנות להן יתרון מכריע: . בסיס משתמשים ותמיכה בקהילה אבל האם העליונות הטכנית יכולה להספיק כדי לשכנע את המשתמשים ש-Unity ו-Unreal מטפחים כבר שנים? מלכודות פוטנציאליות: אמביציה גבוהה, הימור גבוה השאיפות הגבוהות של ByteDance עבור PixelDance ו- Seaweed מביאות איתן מגוון נוצץ של סיכונים. הצבת הרף בשמיים עם הבטחות של כלים ברמה מקצועית לטיטאנים מתחרים בתעשייה הוא מהלך נועז, אבל אם הפלטפורמות הללו , הן מסתכנות להתמודד עם זעמם של המקצוענים אותם הם שואפים לחזר. הוסף - כי מי לא אוהב ביקורת ממשלתית טובה כשאתה משחק עם בינה מלאכותית? - ויש לך מתכון למתח, במיוחד עם החששות לפרטיות הנתונים המתנשאים לגדול ו-TikTok כצאצאיו. לא מצליחות לספק בדיקה רגולטורית ובעוד שהכוונה למקצוענים היא מחזה מתמצא, פיטר ת'יל בוודאי ישאל: האם יש כאן מקום לבנות מונופול? התמונה הגדולה: מכוונים לכוכבים, אבל האם הם ידבקו בנחיתה? בעוד PixelDance ו- Seaweed מתכוננים להשקה הרחבה יותר שלהם, . הם מכוונים , וההתמקדות שלהם ביוצרים באיכות גבוהה על נפח גדול היא מהלך אמיץ, במיוחד בעולם שבו כל פלטפורמה מתאמצת להיות נגישה ככל האפשר. ByteDance מוציא הצהרה נועזת: הם לא מסתפקים רק בלהיות ענקית מדיה חברתית לדרג העליון של יצירת תוכן דיגיטלי האם הם יכולים לעצב מחדש את עולם הווידאו שנוצר בינה מלאכותית או שמא זה יהפוך לעוד ניסוי שאפתני בדברי הימים של ההיסטוריה הטכנולוגית? ולהתקרב אל כס הברזל של הטכנולוגיה? אבל דבר אחד בטוח: הם הופכים את נוף דור הווידאו להרבה יותר מעניין. זו תמונת ירח, וכמו שכל חנון טכנולוגי יודע, אלה לא תמיד נוחתים בחן. אז, הכינו את הפופקורן שלכם. המופע הזה רק מתחיל. הערה: שתי הפלטפורמות נמצאות כעת בשלב בדיקה להזמנה בלבד (תוכל לנסות להגיש בקשה דרך Volcano Engine), עם גישה רחבה יותר צפויה בקרוב - אם כי התאריך המדויק הוא חמקמק כמו אות ה-Wi-Fi שלך במהלך שיחת זום).