שמעון רזזק

כמו שידוע לכולם לבנות מקצבים איכותיים זאת טרחה עצומה, זה שעות עבודה ומלא מאמץ, חשבתי על רעיון לפתח תוכנה שתהיה מבוססת AI שתבנה מקצבים איכותיים ומקצועיים בכמה שניות או דקות עבור הדגימות שלכם. כלומר: המערכת תהיה מורכבת מ 5 שלבים: שלב א: כלי לפענוח וסיווג הדגימות: הכלי קורא את קובצי ה-SET/KMP של Korg, מחלץ מתוכם את צלילי ה-WAV הגולמיים על ידי תוכנה קטנה, ומנתח אותם אוטומטית (כמו ספריית Essentia) כדי לזהות איזה תו שייך לכל כלי (Kick, Snare, Hi-Hat וכדומה), לאחר מכן התוכנה רושמת לעצמה מפה של טבלה, למשל, התו C2 הוא תוף בס, התו D2 הוא סנר, והתו F#2 הוא מצילתיים. שלב ב: כלי לפענוח צלילי הכלים מקובצי מוזיקה (Audio Separation) הכלי מקבל קובץ מוזיקה שמעלה המשתמש (אפשר לשלב קישורים ליוטיוב ועוד) והמערכת מפרקת את הערוצים ע"י מודל AI קיים (כדוגמת Demucs), המודל מפרק את השיר לרצועות נפרדות לכל כלי, שלב ג: כלי להפיכת הסאונד בכל רצועה לתווים דיגיטליים (Audio-to-MIDI Transcription) מודל תמלול מיוחד (כדוגמת Basic Pitch או Omnizart) מקשיב לרצועת התופים הנקייה משלב ב , המודל מזהה כל נקישה או תו, באיזו מילישניה היא התרחשה, באיזו עוצמה (Velocity), ואיזה סוג תוף הוקש או איזה תו. לאחר מכן המודל מייצר קובץ MIDI שמכיל את נתוני הנגינה כתווים דיגיטליים. שלב ד: יישור המקצב והתאמת התווים לאורגן (Quantization & Remapping) מה המטרה? לתקן זיופי קצב אנושיים ולדאוג שהתווים שחולצו בשלב 3 יפעילו בדיוק את הצלילים שהועלו בשלב 1. איך זה עובד בפועל? יישור לקצב (Quantization): אלגוריתם מזיז מעט תווים שנוגנו מוקדם או מאוחר מדי ומיישר אותם במדויק לרשת קצב מוגדרת (כגון 1/16 או 1/8), כדי שהמקצב באורגן ישב בדיוק על התיבה. התאמת תווים (Remapping): אם בשלב 3 התוף בס זוהה בתו C1, אבל בסט של האורגן (משלב 1) התוף בס יושב בתו C2 – המערכת משנה אוטומטית את התו ב-MIDI כך שיקרא מ-C2. תוצאה: קובץ MIDI מיושר שמתאים במאה אחוז לסט הדגימות של המשתמש. שלב ה: בניית פורמט המקצב וממשק משתמש (Style Building & User Interface) מה המטרה? להפוך את ה-MIDI לקובץ מקצב מלא ולתת למשתמש שליטה נוחה בכל התהליך. איך זה עובד בפועל? בניית המבנה: קוד פייתון מקבל את ה-MIDI המיושר וסידורו לפי חלוקה של מקצב אורגן: וריאציות (Variations), מעברים (Fills), פתיחות וסיומות. ממשק אתר: כל התהליך עטוף באתר אינטרנט פשוט עם לחצנים ברורים והסברים בעברית. צ'אט הנחיות: חלונית שיחה המאפשרת למשתמש לבקש שינויים בשפה חופשית (למשל: "הגבר את עוצמת הסנר" או "צור מעבר מהיר יותר"), והמערכת מבצעת זאת ומפיקה קובץ להורדה. כמובן שצריך מערכת AI שתשלוט על המערכת ותדע להבין את המקצב שבשיר, ולא תיצור מקצב שמשתנה לפי איך שהוא נוגן בשיר, וכן שתדע לחלק לפי וריאציות ומעברים וכו'. למעשה אני לא יודע לתכנת וגם אין לי ידע איך ליצור את זה בצורה מקצועית בAI, אז בשביל זה העלתי את זה כאן לשמוע את ההצעות והערות וכן להציע למי שמבין בזה אם רוצה לקחת את הפרוייקט, לדעתי זה יכול לעשות מהפכה דומה לזו שעשתה SUNO בעולם העיבודים. עיינו כאן את זה כתב AI כתוכנית בנייה m2s_master_implementation_guide_v3.0_10pass_audited (1).pdf