اخبار تکنولوژی

ابر کامپیوتر Frontier مدلی شبیه GPT-4 با 1 تریلیون پارامتر را آموزش داد

Frontier_20
Frontier_3

ابر کامپیوتر Frontier مدلی شبیه GPT-4

ابرکامپیوتر فرانتیر (Frontier) مجهز به پردازنده‌ های AMD با پردازشگر های گرافیکی Instinct MI250X برای آموزش یک تریلیون پارامتر در یک مدل زبانی بزرگ (LLM) استفاده شده و راندمان بسیار بالایی در این زمینه داشته است.
Frontier قدرتمند ترین ابرکامپیوتر جهان و تنها دستگاه با قدرت رایانش اگزامقیاس است. این دستگاه از پردازنده‌ های سری Epyc و پردازشگر های گرافیکی سری Instinct شرکت AMD بهره می‌برد که با کمک آن‌ها عملکردهای با پردازش بالا را بهتر انجام می‌دهد و همچنین به‌عنوان دومین ابرکامپیوتر کارآمد روی کره زمین شناخته می‌شود. حالا براساس گزارش جدیدی، ابررایانه Frontier ظاهراً به قابلیت آموزش یک تریلیون پارامتر از طریق رویکرد «تنظیم ابرپارامترها» دست یافته است که معیار جدیدی در صنعت خود به حساب می‌آید.
نکته قابل‌ توجه دیگر اینکه فرانتیر در آزمایش‌ های خود فقط از 3000 شتاب‌ دهنده هوش مصنوعی MI250X بهره برده است، در حالی که مجموعاً دارای 37 هزار شتاب‌ دهنده است.
رکورد جدید فرانتیر با استراتژی‌ های مؤثری که برای آموزش مدل‌ های زبان بزرگ (LLM) به‌ کار‌گرفته‌ شده و همچنین استفاده از سخت‌ افزار داخلی به‌ بهترین نحو ممکن به‌ دست‌ آمده است. این تیم در آزمایش‌ های خود با استفاده از 22 میلیارد، 175 میلیارد و 1 تریلیون پارامتر به نتایج قابل‌ توجهی دست یافته است.
آینده امیدوار کننده‌ای برای سرورها و بخش مرکز داده در انتظار است و نکته مهم دیگری که باید به آن توجه داشته باشیم این است که فرانتیر از سخت‌ افزاری استفاده می‌کند که نسبتاً جدید نیست. با پیشرفت مداوم در بخش هوش مصنوعی مولد، بدیهی است که بازارها به قدرت محاسباتی بیشتری نیاز دارند و به‌ همین دلیل است که پیشرفت‌ های سخت‌ افزاری طراحی‌شده برای این بخش، برای پیشرفت به نسل بعدی مهم هستند.

محققان در پژوهش خود می‌نویسند: «برای 22 میلیارد، 175 میلیارد و 1 تریلیون پارامتر، ما به‌ترتیب به 38.38 درصد، 36.14 درصد و 31.96 درصد از توان عملیاتی GPU دست یافته‌ایم. برای آموزش با 175 میلیارد و 1 تریلیون پارامتر نیز به‌ ترتیب 1024 و 3072 پردازنده MI250X استفاده شده و راندمان مقیاس‌ پذیری ضعیف را به 100 درصد رسانده‌ایم. همچنین برای این دو مدل به راندمان مقیاس پذیری قوی 89 و 87 درصد دست یافتیم.»

آموزش رفع خرابی مادربرد و نحوه پیشگیری از آن
آموزش رفع خرابی مادربرد و نحوه پیشگیری از آن مادربورد یکی از حیاتی‌ترین اجزای کامپیوتر است. می‌توان آن را به عنوان مغز کل سیستم در نظر...
آموزش پیدا کردن مدل مادربرد در سیستم عامل ویندوز و مک
مادربرد، مثل قلب تپنده‌ی کامپیوتر شماست، چه موقعی که برای اولین بار قطعات رو کنار هم می‌چینید و چه موقعی که می‌خواید اون‌ها رو ارتقا بد...
تفاوت سری های مادربرد ایسوس + بررسی مدل‌های برتر

یکی از لذت بخش‌ترین قسمت های خرید کامپیوتر شخصی ساخت آن با سلیقه و نیاز خودمان است. وقتی نسل جدیدی از مادربوردها معرفی می‌شوند، تنها یک مدل طراحی نمی‌شود. شرکت های سازنده مادربرد به شما یک مجموعه وسیعی از گزینه‌ها با سری‌های مختلف ارائه می‌دهند تا بتوانید بردی با ویژگی‌ها و سبک مورد نظر خود بسازید. پس شما محدود به انتخاب چند گزینه‌ی از پیش تعیین‌شده نیستید.

اگرچه وجود این همه مدل مختلف جذاب است، اما انتخاب میان انبوه گزینه‌‌های موجود ممکن است کمی ترسناک باشد. در این وبلاگ، شما را با خانواده‌های مختلف مادربورد ایسوس آشنا می‌کنیم و توضیح می‌دهیم که چه چیزی هر خانواده را منحصر به فرد می‌کند.

معرفی بهترین ساعت های هوشمند با قابلیت پشتیبانی از زبان فارسی

یکی از پرتکرارترین سوالات کاربران درباره ساعت‌های هوشمند این است که کدام مدل‌ها از زبان فارسی پشتیبانی می‌کنند؟ با توجه به این نیاز، تصمیم گرفتیم لیستی جامع از ساعت‌های هوشمندی که از زبان فارسی پشتیبانی می‌کنند تهیه کنیم تا کار شما عزیزان راحت‌تر شود. اگر قصد خرید ساعت هوشمند را دارید، توصیه می‌کنیم قبل از انتخاب مدل مقاله «راهنمای خرید ساعت هوشمند» را مطالعه کنید.

معرفی بهترین ساعت های هوشمند با قابلیت پشتیبانی از زبان فارسی

ساعت‌های هوشمند امروزه با امکانات و قابلیت‌های متنوعی به بازار عرضه می‌شوند و انتخاب یک ساعت هوشمند مناسب با پشتیبانی از زبان فارسی می‌تواند تجربه کاربری بهتری را برای کاربران فارسی زبان به ارمغان بیاورد. این مقاله با بررسی ویژگی‌های مهم هر یک از این ساعت‌ها، از جمله نوع صفحه نمایش، امکانات پایش سلامت و ورزش، عمر باتری، و قابلیت‌های ارتباطی، به کاربران کمک می‌کند تا انتخاب مناسبی برای خود داشته باشند.

معرفی بهترین مادربردهای گیمینگ موجود بازار
دنیای بازی‌های ویدیویی و لپ‌تاپ‌های گیمینگ در حال پیشرفت روزافزون است و مادربرد به عنوان یکی از مهم‌ترین قطعات سیستم، نقشی اساسی در عمل...
معرفی انواع مادربرد کامپیوتر
مادربرد، به عنوان بستر اصلی قطعات کامپیوتر، نقشی اساسی در عملکرد و کارایی کلی سیستم ایفا می‌کند. این بُردِ مادر، میزبان پردازنده، حافظه...
راهنمای کامل تنظیم ساعت هوشمند
ساعت‌های هوشمند، دروازه‌ای به سوی دنیایی از امکانات و اطلاعات هستند. با استفاده از آن‌ها می‌توانید به اطلاعات مختلفی مانند زمان، تاریخ،...
راهنمای خرید بهترین مانیتور گیمینگ
امروزه انتخاب یک مانیتور مناسب بازی از میان هزاران برند و مدل موجود در بازار، کار دشواری می‌‎باشد. تنوع برندها، مدل‌ها و ویژگی‌های مختل...
مادربرد چیست
کامپیوتر‌ها از قطعات مختلفی تشکیل شده‌اند که هر کدام وظایف خاص خود را بر عهده دارند. یکی از مهمترین قطعات هر کامیپیوتری، مادربرد در تما...
راهنمای خرید بهترین ساعت هوشمند تا 3 میلیون تومان-بنر
دنیای گجت‌ها در سال‌های اخیر با سرعت شگفت‌انگیزی پیشرفت کرده است. در این میان، ساعت‌های هوشمند به عنوان یکی از محبوب‌ترین و پرطرفدارتری...
راهنمای خرید ساعت هوشمند تا 2 میلیون_بنر
در دنیای امروز، ساعت‌های هوشمند فراتر از یک وسیله برای نشان دادن زمان هستند. این گجت‌های پوشیدنی کاربردهای متنوعی دارند و حتی می‌توانند...

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *