اطلاعاتی فاش شده از مدل های زبانی سنگین KIMI برپاییه شتاب دهنده های غرب

Moonshot در تلاش برای تهیه پردازنده‌های پیشرفته انویدیا برای مدل Kimi K4

قابت هوش مصنوعی میان آمریکا و چین وارد مرحله تازه‌ای شده است. در حالی که شرکت‌های چینی با سرعت در حال توسعه مدل‌های زبانی قدرتمند هستند، محدودیت‌های صادراتی آمریکا دسترسی آن‌ها به سخت‌افزارهای پیشرفته را دشوار کرده است. حالا گزارش‌های جدید نشان می‌دهد Moonshot AI برای توسعه Kimi K4 به دنبال راه‌هایی برای تهیه پردازنده‌های NVIDIA Blackwell است.

Kimi K3 مدلی متن‌باز با حدود ۲٫۸ تریلیون پارامتر بود که اخیراً منتشر شد!

که مدل Kimi K3  مبتنی بر معماری Mixture of Experts (MoE) با حدود ۲.۸ تریلیون پارامتر کل است که در هر درخواست تنها بخشی از این پارامترها فعال می‌شوند. و تقاضا برای استفاده از آن به حدی بالا رفت که شرکت مجبور شد ثبت‌نام‌های جدید را موقتاً متوقف کند. حالا Moonshot قصد دارد نسخه بعدی را بزرگ‌تر و قدرتمندتر بسازد.

چرا Moonshot به پردازنده‌های NVIDIA Blackwell و GB300 نیاز دارد? 

مشکل اصلی، محدودیت‌های سخت‌افزاری است. آمریکا فروش پردازنده‌های پیشرفته نسل Blackwell را به شرکت‌های چینی ممنوع کرده و علاوه بر محدودیت‌های صادراتی آمریکا، دولت چین نیز در برخی پروژه‌ها استفاده از سخت‌افزار خارجی را کاهش داده و توسعه محصولات داخلی را در اولویت قرار داده است.

 با این وجود، گزارش‌ها حاکی از آن است که Moonshot برای آموزش Kimi K3 از همین تراشه‌های ممنوعه استفاده کرده است.
این شرکت از روش‌های غیرمستقیم بهره برده است؛ از جمله تهیه سرورهای مجهز به تراشه‌های GB300 از طریق کشورهای ثالث و اجاره ظرفیت محاسباتی در مکان‌هایی مانند تایلند. همچنین مهندسان Moonshot چندین سرور مستقر در مراکز داده مختلف را به یک خوشه محاسباتی واحد متصل کرده‌اند تا قدرت پردازشی لازم برای آموزش مدل را فراهم شود.

چین چگونه به شتاب دهنده های انویدیا دسترسی پیدا کرد؟ محدودیت سازی غرب بر توسعه مدل های شرکت Moonshot AI

مقامات دولت آمریکا، به‌ویژه در دولت ترامپ، این اقدامات را نقض آشکار قوانین صادراتی دانسته‌اند. یکی از مقامات کاخ سفید صراحتاً اعلام کرده که Moonshot سرورهای GB300 را تهیه کرده و از طریق تایلند به آن‌ها دسترسی یافته است.آن‌ها همچنین ادعا کرده‌اند که Moonshot ممکن است از خروجی مدل‌های هوش مصنوعی آمریکایی برای بهبود کیفیت آموزش یا پاسخ‌های Kimi استفاده کرده باشد؛ ادعایی که تاکنون به‌صورت رسمی تأیید نشده است.

از منظر تحلیلی، این ماجرا نشان‌دهنده وابستگی عمیق شرکت‌های پیشرو چینی به سخت‌افزار آمریکایی است. تراشه‌های بومی چین هنوز یک یا دو نسل عقب‌تر هستند و برای آموزش مدل‌های بسیار بزرگ کافی نیستند. به همین دلیل شرکت‌هایی مانند Moonshot ناچارند ریسک کنند و راه‌های دور زدن تحریم‌ها را پیدا کنند.

رقابت هوش مصنوعی آمریکا و چین وارد مرحله جدیدی شد؟ 

این موضوع فراتر از یک خبر فنی است و بخشی از رقابت استراتژیک هوش مصنوعی میان آمریکا و چین محسوب می‌شود. آمریکا تلاش می‌کند با محدود کردن دسترسی به فناوری پیشرفته، سرعت پیشرفت چین را کاهش دهد، در حالی که چین با روش‌های مختلف سعی در حفظ و افزایش توان محاسباتی خود دارد.
در حال حاضر دولت آمریکا در حال بررسی راه‌هایی برای بستن این حفره‌هاست، از جمله محدود کردن دسترسی از راه دور به سرورهای قدرتمند در کشورهای ثالث. در مقابل، شرکت‌های چینی نیز به‌دنبال یافتن مسیرهای جدید برای تأمین قدرت محاسباتی هستند.

اگر Moonshot بتواند قدرت پردازشی موردنیاز Kimi K4 را تأمین کند، این مدل می‌تواند به یکی از جدی‌ترین رقبای مدل‌های آمریکایی تبدیل شود. با این حال، آینده این پروژه بیش از هر چیز به دسترسی این شرکت به سخت‌افزارهای پیشرفته و روند تحریم‌های فناوری میان آمریکا و چین وابسته خواهد بود.