پس از انتشار Gemini 1.0 Ultra و Gemini 1.5 Pro در چند هفته گذشته، گوگل اکنون خانواده جدیدی از مدل های منبع باز کوچک به نام Gemma را راه اندازی کرده است. این در دو نوع ارائه می شود، یکی با پارامترهای 2B و دیگری با پارامترهای 7B.
این مدلهای منبع باز دارای مجوز تجاری هستند، به این معنی که برخلاف Gemini که یک مدل اختصاصی است، میتوان آنها را آزادانه برای مقاصد تجاری استفاده یا تغییر داد. این شرکت میگوید که مدلهای Gemma علیرغم اندازه کوچکشان، قادر هستند و بر اساس تحقیقات و فناوری مورد استفاده برای ساخت مدلهای Gemini ساخته شدهاند.
مدل های Gemma می توانند به راحتی روی لپ تاپ شما اجرا شوند
گوگل میگوید مدلهای منبع باز Gemma بسیار کوچک هستند و میتوان آنها را به راحتی بر روی لپتاپ یا دسکتاپ نصب کرد. آنها در مورد مجموعه داده های انگلیسی، از جمله اسناد وب، کد، و ریاضیات آموزش دیده اند.
مدل های جما مناسب هستند خلاصه سازی متن، تولید، استدلال، پرسش و پاسخ و موارد دیگر. در مورد مجموعه داده های آموزشی، گوگل می گوید مدل های Gemma در مجموع بر روی 6 تریلیون توکن آموزش داده می شوند.
در حالی که مدل ها منبع باز هستند، گوگل این کار را انجام داده است آزمایش گسترده از مدل های ایمنی، تعصب و خطرات. فیلتر CSAM (مواد آزار جنسی کودکان) به شدت برای حذف هر گونه محتوای مضر اعمال شده است. جدا از آن، بسیاری از فیلترهای داده های حساس برای حذف اطلاعات شخصی از مدل ها اعمال شده است.
گوگل همچنین یک جعبه ابزار هوش مصنوعی مولد مسئولیت پذیر را برای توسعه دهندگان ارائه می دهد تا از این مدل به طور مسئولانه استفاده کنند. خانواده مدلهای Gemma منبع باز هستند، اما برخی از خطمشیهای استفاده ممنوع دارد که توسعهدهندگان را از استفاده از آن برای «منع میکند.فعالیت های خطرناک، غیرقانونی یا مخرب“، در میان چیز های دیگر.
![معیارهای google gemma vs llama 2](https://colbe.ir/wp-content/uploads/2024/02/گوگل-جما،-خانواده-ای-از-مدل-های-منبع-باز-را.jpg)
با رسیدن به معیارها، مدل Gemma 2B در آزمون MMLU امتیاز 42.3 را کسب کرده است. مدل 7B امتیاز 64.3 را کسب کرده است. در تست HellaSwag، مدل 2B امتیاز 71.4 و مدل 7B امتیاز 81.2 را کسب کرد. در مقابل، مدل 2.7B Phi-2 مایکروسافت در تست MMLU امتیاز 56.7 و Llama 2 متا (7B) امتیاز 45.3 را کسب کردند. با این حال، مدل Gemini Nano 2 (3.2B) خود گوگل در همان تست امتیاز 55.8 را کسب کرد.
به طور کلی، من معتقدم گوگل گام خوبی برای انتشار مدل های منبع باز برای تحقیق و تقویت نوآوری برداشته است. میتوانید از مدلهای Gemma در Kaggle استفاده کنید یا پیادهسازی رسمی PyTorch مدلهای Gemma را در GitHub انجام دهید (بازدید کنید). همچنین میتوانید Gemma را در Vertex AI بررسی کنید (بازدید کنید).
در روز آینده، من این مدل منبع باز را آزمایش خواهم کرد تا ببینم چگونه در برابر سایر مدل های منبع باز محبوب موجود است. بنابراین منتظر یک آزمون جامع تر و عملی تر از Gemma، Mixtral و سایر LLM باشید.
با کُلبه وبسایت و مجله فناوری و ابزارهای هوشمند ،بهترین تکنولوژی، بهترین آینده ، بروز بمانید