גוגל משחררת את Gemma - מודל קל משקל וקוד פתוח

תוך שבוע אחד בלבד, העולם ראה התקדמות פורצת דרך בבינה המלאכותית של שתי ענקיות טכנולוגיה.

OpenAI הציגה את מחולל הווידאו AI שלה, Sora, בעוד שגוגל חשפה את מודל ה-Gemini 1.5 שלה, המסוגל לתמוך בחלון הקשר של עד מיליון טוקנים.

גוגל הטילה פצצה נוספת עם שחרורו של Gemma, משפחה של מודלי קוד פתוח קלים ומשוכללים הבנויים על המחקר והטכנולוגיה ששימשו ליצירת מודלי ה-Gemini.

מה זה Gemma (ג’מה)?

על שם המילה הלטינית gemma “אבן יקרה”, Gemma שואב השראה מקודמו, Gemini, המשקף את ערכו ואת ״נדירותו״ בעולם הטכנולוגיה.

הם מודלי שפה גדולים מטקסט לטקסט, מפענחים בלבד, זמינים באנגלית, עם משקלים פתוחים, גרסאות מאומנות מראש וגרסאות מכווננות להוראות.

מה זה Gemma (ג'מה) של גוגל?

Gemma זמין ברחבי העולם החל מ-21.2.24 בשני גדלים (2B ו-7B), תומך במגוון רחב של כלים ומערכות, ופועל על מחשב נייד למפתחים ותחנות עבודה.

2 גדלים ויכולות של מודלים

מודלי Gemma זמינים בגדלים של 2 מיליארד ו-7 מיליארד פרמטרים. מודל ה-2B מיועד לרוץ על מכשירים ניידים ומחשבים ניידים, בעוד שמודל ה-7B מיועד לרוץ על מחשבים שולחניים ושרתים קטנים.

Gemma מגיע גם בשתי גרסאות: מכווננת ומאומנת מראש.

  • מאומן מראש (Pretrained): זה כמו מודל הבסיס ללא כל כוונון. מודל זה אינו מאומן בשום משימות או הוראות ספציפיות מעבר לסט אימון הליבה של Gemma.
  • מכוון הוראות (Instruction-tuned): מודל זה מותאם לאינטראקציות בשפה אנושית, מה שמשפר את יכולתו לבצע משימות ממוקדות.

איך Gemma בהשוואה למתחרים?

בגלל גודלו הקטן, Gemma מסוגל לפעול ישירות על המחשב הנייד של המשתמש. התרשים שלהלן מראה כיצד הבנת השפה וביצועי היצירה של Gemma (7B) בהשוואה למודלים פתוחים בגודל דומה כמו LLaMA 2 (7B), LLaMA 2 (13B) ומיסטראל (7B).

איך Gemma בהשוואה למתחרים?
מתוך הדוח הטכני המפרט את ביצועי Gemma. למקור: גוגל

לשם מה צריך את Gemma?

להלן כמה מקרי שימוש אפשריים שבהם ניתן להשתמש ב-Gemma:

יצירת תוכן ותקשורת

  • יצירת טקסט
  • צ’טבוטים ו-Conversational AI
  • סיכום טקסט

מחקר וחינוך

  • מחקר עיבוד שפה טבעית (NLP): משמש בסיס לחקר ה-NLP, התנסות בטכניקות, פיתוח אלגוריתמים ותורם לקידום התחום.
  • כלים ללימוד שפה: תמיכה בחוויות לימוד שפה אינטראקטיביות, סיוע בתיקון דקדוק או מתן תרגול כתיבה.
  • חקר ידע: סיוע לחוקרים בחקירת גופי טקסט גדולים על ידי הפקת סיכומים או מענה על שאלות בנושאים ספציפיים.

משימות שבעבר דרשו מודלים גדולים במיוחד אפשריות כעת עם מודלים חדישים וקטנים יותר. זה פותח דרכים חדשות לחלוטין לפיתוח יישומי בינה מלאכותית, ובקרוב נוכל לראות צ’אטבוטים של בינה מלאכותית במכשירי הסמארטפונים שלנו – ללא צורך בחיבור לאינטרנט.

כמה זה מרגש?!

אבל האם באמת Gemma טוב?

מספר משתמשי Reddit שיתפו את הניסיון שלהם בשימוש ב-Gemma, ועד כה, זה לא נראה הכי טוב. תסתכלו על הדוגמה הזו שבה Gemma נותן תשובות לא נכונות כשהוא נשאל על שאלות משקל.

משתמשי Reddit שיתפו את הניסיון שלהם בשימוש ב-Gemma
תמונה מ- Reddit על ידי המשתמש: OrdinaryAdditional91

לא ממש ניסיתי את זה בעצמי, אבל חשוב לזכור שלמודלים קטנים יותר כמו זה צפויים כמה פגמים ועלולים לתת תשובות לא נכונות לפעמים.

נסו בעצמכם

אתם יכולים להתחיל לעבוד עם Gemma כבר היום באמצעות גישה חופשית ל-Kaggle, שכבה חינמית עבור ספריות Colab, ו-$300 בזיכוי למשתמשי Google Cloud בפעם הראשונה.

אם אתם מעוניינים להתחיל עם Gemma, עיינו בדרכים הבאות כדי ללמוד יצירת טקסט ועד לפריסה במצב Gemma:

  • יצירת טקסט עם Gemma: בנו דוגמה בסיסית ליצירת טקסט עם המודל.
  • כוונון Gemma עם LoRA: בצעו כוונון LoRA עדין במודל Gemma 2B.
  • כוונן מודל Gemma באמצעות אימון מבוזר: השתמשו ב-Keras עם JAX backend כדי לכוונן מודל Gemma 7B עם LoRA ומקביליות מודל.
  • פרסו את Gemma לייצור: השתמשו ב-Vertex AI כדי לפרוס את Gemma לייצור.

הורידו את מודל Gemma

  • המודלים הפתוחים זמינים כעת ב- HuggingFace.
  • ניתן להוריד את מודלי Gemma גם מ-Kaggle Models.

לסיכום

בעוד שמודלי Gemma עשויים להיות קטנים ועם מעט מורכבויות, הם עשויים לפצות על כך במהירות ובעלות השימוש.

בהסתכלות על התמונה הגדולה יותר, במקום לרדוף אחרי התרגשות צרכנית מיידית, גוגל מטפחת שוק לעסקים. הם מדמיינים שחברות משלמות עבור שירותי Google Cloud כאשר מפתחים משתמשים ב-Gemma כדי ליצור יישומי צריכה חדשניים.

כמו כן, למרות קבלת הפנים המדהימה של ג’מיני, גוגל עדיין מראה שיש לה עוד טריקים מתחת לשרוול.

כמובן, עם כל טכנולוגיה חזקה, המבחן האמיתי הוא עד כמה זה עובד. העבר של גוגל מעלה את השאלה האם המודלים הללו יצליחו כפי שהם מבטיחים בעולם האמיתי. חשוב לפקוח עין זהירה על זה, אבל גם לקוות שגוגל תלמד מהעבר ותספק מודלים שהם באמת דומים או אפילו טובים יותר מהמתחרים.

גילוי נאות:

תוכן המאמר נכתב לאחר מאמץ ומחקר על מנת לספק את התוכן האמין ביותר שניתן. כמו כן התוכן מתייחס למידע שקיים בעת שעודכן לאחרונה בתאריך: 04/03/2024, ולכן עשויים להיות שינויים ואי התאמות שחלו מאז.
כמו כן, כל המאמרים המסקרים מוצרים או שירותים כלשהם הינם מוצרים שרכשתי והתנסתי בהם בעצמי. בחלק מהמקרים אני אקשר לאתרי המוצרים באמצעות קישור שיתופי (Affiliate), שיתוף פעולה זה מאפשר לי לעיתים לספק לכם הגולשים הטבות מיוחדות ובתמורה אני מתוגמל באופן חלקי ואינו משפיע על העלות הסופית.
תודה על שיתוף הפעולה. ומקווה שהפקתם את המיטב מקריאה זו.

הגדילו את התנועה האורגנית שלכם עם SurferSEO
Jasper ai - ניסיון חינם

אולי יעניין אותך לקרוא…

שיר שנוצר על יד AI המחקה את Drake נשלח לגראמי: רגע מהותי למוזיקה ולבינה המלאכותית

שיר שנוצר על יד AI המחקה את Drake נשלח לגראמי: רגע מהותי למוזיקה ולבינה המלאכותית

תעשיית המוזיקה עומדת בפני מהפכה לאחר שיוצר אנונימי הגיש לגראמי שיר שנוצר על ידי בינה מלאכותית. השיר משתמש בבינה מלאכותית…
המשך קריאה שיר שנוצר על יד AI המחקה את Drake נשלח לגראמי: רגע מהותי למוזיקה ולבינה המלאכותית