ForgeStencil – 面壁智能推出的 Stencil 全自动研究部署系统 চালু আছে

ForgeStencil হল 面壁智能 ও OpenBMB ওপেন সোর্স কমিউনিটির যৌথভাবে প্রকাশিত বিশ্বের প্রথম AI অপ্টিমাইজেশন সিস্টেম, যা Stencil-এর স্বয়ংক্রিয় গবেষণা ও স্বয়ংক্রিয় ডিপ্লয়মেন্ট সমর্থন করে। Kernel Agent ও App Agent-এর দ্বি-এজেন্ট ক্লোজড-লুপের মাধ্যমে এটি অপ্টিমাইজেশন কৌশল আবিষ্কার থেকে বাস্তব প্রোডাকশন সফটওয়্যারে ইন্টিগ্রেশন পর্যন্ত পুরো প্রক্রিয়া শূন্য মানব হস্তক্ষেপে সম্পন্ন করে। সিস্টেমটি এক সপ্তাহে 100টির বেশি শিল্প ও বৈজ্ঞানিক কম্পিউটিং সফটওয়্যারের এন্ড-টু-এন্ড অপ্টিমাইজেশন সম্পন্ন করেছে, মধ্যম ускорণ 1.41 গুণ, এবং তেল ও গ্যাস অনুসন্ধান, ইলেক্ট্রোম্যাগনেটিক সিমুলেশন ও মেডিক্যাল ইমেজিংসহ 8টি প্রধান শিল্পক্ষেত্র এবং 5টি প্রধান বৈজ্ঞানিক ক্ষেত্রকে কভার করে।

দ্বি-Agent ক্লোজড-লুপ অপ্টিমাইজেশন: Kernel Agent স্বয়ংক্রিয়ভাবে উচ্চ-পারফরম্যান্স CUDA Kernel গবেষণা ও সংশ্লেষণ করে; App Agent হটস্পট শনাক্তকরণ, অপারেটর নির্মাণ, সঠিকতা যাচাই এবং অ্যাপ্লিকেশন ইন্টিগ্রেশন সম্পন্ন করে।
স্বয়ংক্রিয় কৌশল আবিষ্কার: Agent নির্দিষ্ট সার্চ স্পেসে সীমাবদ্ধ না থেকে টাইলিং, ফিউশন, লেআউট, অকুপেন্সি এবং হোস্ট-সাইড রিফ্যাক্টরিংসহ বিভিন্ন অপ্টিমাইজেশন কৌশল স্বয়ংক্রিয়ভাবে অনুসন্ধান করে।
বাস্তব অ্যাপ্লিকেশন ডিপ্লয়মেন্ট: সরলীকৃত Benchmark নয়, সরাসরি প্রোডাকশন-গ্রেড সফটওয়্যারকে লক্ষ্য করে অপ্টিমাইজেশন করা হয় এবং অ্যাপ্লিকেশনের নিজস্ব GPU কোডকে বেসলাইন হিসেবে নিয়ে এন্ড-টু-এন্ড যাচাই করা হয়।
অডিটযোগ্য পরিমাপ প্রোটোকল: একটি একক এনভায়রনমেন্ট সুইচের মাধ্যমে মূল পথ ও অপ্টিমাইজড পথ পর্যায়ক্রমে পরিবর্তন করা হয়। প্রোগ্রামের নিজস্ব যাচাই ও টাইমার ব্যবহার করে নিশ্চিত করা হয় যে স্পিডআপের হিসাব বাস্তব ও নির্ভরযোগ্য।
বিভিন্ন প্রজন্মের GPU সমর্থন: A100/H100/B200 রানটাইম আর্কিটেকচার ডিস্ট্রিবিউশন সমর্থন করে; একই কোডবেস আর্কিটেকচার অনুযায়ী স্বয়ংক্রিয়ভাবে সর্বোত্তম Kernel পথ বেছে নেয়।

WeChat-এ ফলো করে “开源” লিখে রিপ্লাই দিন, AI ওপেন সোর্স প্রকল্পের গ্রুপে যোগ দিন
দ্বি-Agent সমন্বিত আর্কিটেকচার: সিস্টেমটি Kernel Agent ও App Agent নিয়ে গঠিত একটি ক্লোজড-লুপ। Kernel Agent তাত্ত্বিক আবিষ্কারের দায়িত্বে থাকে এবং Plan→Code→Profile চক্রের মাধ্যমে হার্ডওয়্যারের ভৌত সীমার কাছাকাছি Stencil অপারেটর স্বয়ংক্রিয়ভাবে গবেষণা ও সংশ্লেষণ করে। App Agent ইঞ্জিনিয়ারিং বাস্তবায়নের দায়িত্বে থাকে; এটি অ্যাপ্লিকেশনের পারফরম্যান্স হটস্পট শনাক্ত করে, GPU বেসলাইন তৈরি করে, Kernel Agent নির্মিত অপারেটর ম্যাট্রিক্স জ্ঞানভান্ডার ব্যবহার করে অ্যাপ্লিকেশন-নির্দিষ্ট অপ্টিমাইজেশন তৈরি করে এবং সঠিকতা যাচাই ও মূল অ্যাপ্লিকেশনে ইন্টিগ্রেশন সম্পন্ন করে।
অপারেটর ম্যাট্রিক্স ও জ্ঞানভান্ডারের বিবর্তন: অপ্টিমাইজেশনের সময় Kernel Agent ধারাবাহিকভাবে একটি বিশেষায়িত অপারেটর ম্যাট্রিক্স তৈরি করে জ্ঞানভান্ডার হিসেবে সংরক্ষণ করে; পরবর্তী পর্যায়ে App Agent বিদ্যমান প্রযুক্তি পুনর্ব্যবহার করতে পারে। একাধিক সমান্তরাল Agent এই জ্ঞানভান্ডার ভাগ করে নিয়ে অভিজ্ঞতা তাৎক্ষণিকভাবে শেয়ার করে এবং সম্মিলিতভাবে সমন্বিত বিবর্তন ঘটায়, ফলে মানব বিশেষজ্ঞের অভিজ্ঞতা বৃহৎ পরিসরে স্থানান্তরের সীমাবদ্ধতা দূর হয়।
অডিটযোগ্য এন্ড-টু-এন্ড প্রোটোকল: পরিমাপের একমাত্র বেসলাইন হিসেবে অ্যাপ্লিকেশনের নিজস্ব প্রোডাকশন-গ্রেড GPU বাস্তবায়ন ব্যবহার করা হয়। মূল পথ ও অপ্টিমাইজড পথ কেবল একটি USE_OURS সুইচের মাধ্যমে পৃথক করা হয় এবং মূল পথটি upstream-এর সঙ্গে বাইট-স্তরে সামঞ্জস্যপূর্ণ। প্রোগ্রামের অন্তর্নির্মিত সঠিকতা যাচাই ও টাইমার ব্যবহার করে একাধিক পর্যায়ক্রমিক রান শেষে মধ্যম মান নেওয়া হয়; পরে সব স্ট্যান্ডার্ড কেসের জ্যামিতিক গড় স্পিডআপ রিপোর্ট করা হয়, যা সিস্টেম পর্যায়ে ফল জালিয়াতির সুযোগ দূর করে।
Patch মোড ও শূন্য সোর্স-কোড বান্ডলিং: কোনো তৃতীয়-পক্ষের সোর্স কোড বান্ডল করা হয় না। প্রতিটি অ্যাপ্লিকেশনের জন্য কেবল upstream উৎসের রেকর্ড, সংগ্রহের স্ক্রিপ্ট এবং ইন্টিগ্রেশন প্যাচ দেওয়া হয়। vendor.sh-এর মাধ্যমে নির্দিষ্ট সংস্করণের upstream কোড স্বয়ংক্রিয়ভাবে সংগ্রহ করা হয়, যাতে লাইসেন্স পরিষ্কার থাকে এবং ফলাফল পুনরুৎপাদনযোগ্য হয়।

পরিবেশ প্রস্তুতি: রিপোজিটরি ক্লোন করুন এবং NVIDIA GPU (A100-এ যাচাইকৃত), CUDA 12.x, C++17 কম্পাইলার ও Python 3.9+ পরিবেশ নিশ্চিত করুন।
দ্রুত অপারেটর পরীক্ষা: python tools/run.py --stencil star_1 --shape 256 --gpu 0 চালালে 1 মিনিটের মধ্যে একটি অপারেটরের পারফরম্যান্স মাপা যাবে এবং Halide বেসলাইনের সঙ্গে তুলনা করা যাবে।
এন্ড-টু-এন্ড পুনরুৎপাদন: লক্ষ্য অ্যাপ্লিকেশনের ডিরেক্টরিতে প্রবেশ করে ./vendor.sh চালিয়ে upstream সোর্স কোড সংগ্রহ করুন। ইন্টিগ্রেশন প্যাচ প্রয়োগের পর python ../../harness/run_e2e.py --app --gpu auto চালিয়ে বাস্তব অ্যাপ্লিকেশন যাচাই সম্পন্ন করুন।
Agent চালানো: agents/README.md অনুসরণ করে Kernel Agent ও App Agent-এর স্বয়ংক্রিয় অপ্টিমাইজেশন চক্র কনফিগার ও চালু করুন।
ফলাফলের রেজিস্ট্রি দেখুন: results/integration_registry.json-এর মাধ্যমে 100টি যাচাইকৃত অ্যাপ্লিকেশনের অডিট করা স্পিডআপ ডেটা দেখুন।

শূন্য মানব হস্তক্ষেপ: অ্যাপ্লিকেশন বিশ্লেষণ, হটস্পট শনাক্তকরণ, Kernel নির্মাণ থেকে ইন্টিগ্রেশন যাচাই পর্যন্ত পুরো প্রক্রিয়া স্বয়ংক্রিয়; HPC বিশেষজ্ঞের সিদ্ধান্তগ্রহণের প্রয়োজন নেই।
বাস্তব পরিস্থিতিকেন্দ্রিক: সরাসরি প্রোডাকশন-গ্রেড শিল্প সফটওয়্যার অপ্টিমাইজ করে; 42% বাস্তব শিল্প উৎপাদন সফটওয়্যার এবং বেসলাইন হল অ্যাপ্লিকেশনের নিজস্ব GPU কোড।
গবেষণা ও উন্নয়নে বড় গতি: একটি অ্যাপ্লিকেশনের অপ্টিমাইজেশন কয়েক মাস থেকে কমে 1 দিনের মধ্যে সম্পন্ন হয়; এক সপ্তাহে 100+ অ্যাপ্লিকেশন সম্পন্ন করে, যা আনুমানিক 20–30 ব্যক্তি-বছরের গবেষণা ও উন্নয়ন শ্রম সাশ্রয়ের সমতুল্য।
শক্তিশালী পারফরম্যান্স: এন্ড-টু-এন্ড মধ্যম স্পিডআপ 1.41 গুণ; 43% অ্যাপ্লিকেশনে ≥1.5 গুণ; অপারেটর-স্তরে জ্যামিতিক গড় 2.16 গুণ, যা সেরা ওপেন সোর্স বেসলাইনের চেয়ে এগিয়ে।
বিভিন্ন আর্কিটেকচারে স্থায়ীভাবে কার্যকর: NVIDIA GPU-এর একাধিক প্রজন্মের রানটাইম ডিস্ট্রিবিউশন সমর্থন করে; আর্কিটেকচার আপগ্রেড হলে নতুন হার্ডওয়্যার বৈশিষ্ট্য কাজে লাগাতে Kernel স্বয়ংক্রিয়ভাবে পুনর্নির্মাণ করতে পারে।

GitHub রিপোজিটরি：https://github.com/OpenBMB/ForgeStencil

তেল ও গ্যাসের সিসমিক অনুসন্ধান: RTM রিভার্স-টাইম মাইগ্রেশন, Total mini-appসহ মূল অ্যালগরিদম অপ্টিমাইজ করে তেল অনুসন্ধান ডেটা প্রক্রিয়াকরণকে দ্রুততর করে।
ইলেক্ট্রোম্যাগনেটিক সিমুলেশন ডিজাইন: gprMax/FDTD-এর মতো Yee গ্রিডে Maxwell সমীকরণ সমাধানের দক্ষতা বাড়িয়ে রাডার ও চিপ ইলেক্ট্রোম্যাগনেটিক বিশ্লেষণে সহায়তা করে।
মেডিক্যাল ইমেজ পুনর্গঠন: নন-কার্টেসিয়ান MRI পুনর্গঠন, ডিজিটাল ব্রেস্ট টমোসিন্থেসিসের ব্যাক-প্রজেকশনসহ চিকিৎসা-ইমেজিংয়ের কম্পিউটিং লোড দ্রুত সম্পন্ন করে।
জলবায়ু ও অ্যাস্ট্রোফিজিক্স: বায়ুমণ্ডলীয় গতিবিদ্যা, কসমোলজি সিমুলেশনসহ Stencil-নির্ভর বৈজ্ঞানিক কম্পিউটিং অ্যাপ্লিকেশন অপ্টিমাইজ করে।
কোয়ান্টিটেটিভ ফাইন্যান্স কম্পিউটিং: QuantLib-এর মতো আর্থিক প্রতিষ্ঠানের প্রাইসিং লাইব্রেরিতে Stencil হটস্পট স্বয়ংক্রিয়ভাবে অপ্টিমাইজ করে, লেনদেনের কম্পিউটিং বিলম্ব কমায়।