২০২৬ সালের ২৭ জুলাই, Moonshot AI আনুষ্ঠানিকভাবে Kimi K3-এর সোর্স কোড উন্মুক্ত করে। এই মডেলের মোট প্যারামিটারের সংখ্যা ২.৮ ট্রিলিয়ন। এটি বিশ্বের প্রথম উন্মুক্ত ৩ ট্রিলিয়ন-স্তরের মডেল, যা দীর্ঘমেয়াদি প্রোগ্রামিং, জ্ঞানভিত্তিক কাজ এবং ইনফারেন্সসহ উন্নত বুদ্ধিমত্তা-নির্ভর ব্যবহারের জন্য তৈরি করা হয়েছে।
হুয়াওয়ে আজ আনুষ্ঠানিকভাবে ঘোষণা করেছে:
Kimi K3 ওপেন সোর্স হিসেবে প্রকাশের সঙ্গে সঙ্গেই Ascend 0day দ্রুত অভিযোজন সম্পন্ন করেছে। প্রশিক্ষণ পর্যায়ে MindSpeed MM-এর মাধ্যমে Atlas 800 A3 এবং Atlas 900 A3 SuperPoD-তে লেয়ার-হ্রাস প্রশিক্ষণের মৌলিক ফাংশনের অভিযোজন সম্পন্ন হয়েছে। অপারেটর, সমান্তরাল ত্বরণ এবং মেমরি অপ্টিমাইজেশনের মতো ক্ষেত্রে বিশেষ অপ্টিমাইজেশন করা হয়েছে। ইনফারেন্স পর্যায়ে vLLM Ascend এবং SGLang ওপেন সোর্স ইনফারেন্স ইঞ্জিনের মাধ্যমে দ্রুত ডিপ্লয়মেন্ট সম্ভব হয়েছে। একই সঙ্গে, Ascend 950 সুপারনোড FP8, MXFP8, MXFP4-সহ সব ধরনের সংখ্যাগত নির্ভুলতা ফরম্যাট সমর্থন করে এবং Kimi K3-এর mxFP4 কোয়ান্টাইজড ওজনের নেটিভ সমর্থন প্রদান করে।
IT之家-এর গতকালের প্রতিবেদন অনুযায়ী, Kimi-এর কর্মকর্তারা Kimi K3-এর প্রশিক্ষণকে সমর্থনকারী তিনটি Infra প্রযুক্তিও প্রকাশ করেছেন: MoonEP, FlashKDA এবং AgentEnv। এগুলো উচ্চ-পারফরম্যান্স যোগাযোগ, উচ্চ-পারফরম্যান্স অপারেটর এবং ডিস্ট্রিবিউটেড RL পরিবেশসহ গুরুত্বপূর্ণ বিভিন্ন ধাপকে কভার করে। এর মধ্যে FlashKDA আগে থেকেই ওপেন সোর্স করা হয়েছিল, আর MoonEP ও AgentEnv এই প্রকাশনার সঙ্গে আনুষ্ঠানিকভাবে ওপেন সোর্স করা হয়েছে।
ওপেন সোর্স লিংক:
Hugging Face: https://huggingface.co/moonshotai/Kimi-K3
GitHub: https://github.com/MoonshotAI/Kimi-K3