OpenMuse آپریشن میں

OpenMuse، CopilotKit کا اوپن سورس ذاتی AI معاون ہے۔ OpenMuse ایجنٹ کو ایک کمپیوٹر فراہم کرتا ہے، جس میں مستقل براؤزر، اختیاری Linux کنٹینر اور فائل سسٹم شامل ہیں۔ کام پسِ منظر میں مسلسل چل سکتے ہیں اور کسی بھی وقت روکے یا اپنے اختیار میں لیے جا سکتے ہیں۔ OpenMuse Gmail/کیلنڈر، PDF فارم پُر کرنے، ویب مانیٹرنگ اور اخراجات کے تجزیے جیسے کاموں کو سپورٹ کرتا ہے۔ یہ iOS/Android/Web کے لیے دستیاب ہے، ماڈل اور کلیدیں خود ترتیب دینا ضروری ہے، اور ڈویلپرز کے لیے مزید ترقی کے لیے موزوں ہے۔

WeChat پر فالو کر کے “开源” کا جواب دیں اور AI اوپن سورس پروجیکٹس کے گروپ میں شامل ہوں
چیٹ انٹریکشن: CopilotKit ہیڈ لیس چیٹ، AG-UI ایونٹ کی اسٹریمنگ رسپانس، ای میل تلاش، بھیجنے/روکنے کے لیے یکجا ان پٹ باکس، جبکہ ای میل، براؤزر اور PDF کے نتائج ان لائن کارڈز میں دکھائے جاتے ہیں۔
ایجنٹ کمپیوٹر: مستقل Chromium براؤزر اور اختیاری Linux Docker کنٹینر شامل ہیں۔ ایجنٹ ویب براؤز کر سکتا ہے، کمانڈز چلا سکتا ہے اور فائلوں و PDF پر کارروائی کر سکتا ہے۔
انسانی اختیار سنبھالنا: کسی بھی وقت براؤزر یا ٹرمینل کھول کر ایجنٹ کی براہِ راست کارروائی دیکھیں، اور “Take control” کے ذریعے اسی سیشن کا اختیار سنبھال کر کام جاری رکھیں۔
ٹاسک مینجمنٹ: کاموں میں منصوبہ، پیش رفت اور منظوری کے مراحل شامل ہوتے ہیں۔ انہیں روکا، بحال، منسوخ یا دوبارہ چلایا جا سکتا ہے۔ فرنٹ اینڈ بند ہونے کے بعد بھی کام سرور پر چلتے رہتے ہیں۔
دستاویزات پر کارروائی: ای میل منسلک PDF پڑھیں، فارم کی مطلوبہ معلومات آپ سے لیں، جائزے کے لیے پُر شدہ نقل تیار کریں اور جواب کا مسودہ بنائیں۔
Gmail اور کیلنڈر: Google OAuth کے ذریعے مربوط ہو کر مکمل ای میل تھریڈز، مسودات اور کیلنڈر ایونٹس بنانا، ترمیم کرنا اور حذف کرنا سپورٹ کرتا ہے۔ ہر تحریری کارروائی کے لیے انسانی تصدیق ضروری ہے۔
مقاصد کی نگرانی: مقاصد کو سنگِ میلوں میں تقسیم کیا جا سکتا ہے۔ عوامی ویب صفحات کی تبدیلی، دوبارہ دستیابی اور قیمت کی حد کی باقاعدہ جانچ بھی کی جا سکتی ہے، جبکہ انتباہات خودکار طور پر نقل نہیں ہوتے۔
اخراجات کا تجزیہ: ٹرانزیکشن CSV درآمد کریں اور خودکار طور پر زمرہ وار خلاصہ و بچت کے اہداف کی تجاویز تیار کریں۔
ذاتی یادداشت: نام، اندازِ گفتگو، اوتار اور یادداشت کی ترجیحات قابلِ ترمیم ہیں اور مختلف کاموں میں مستقل محفوظ رہتی ہیں۔

پروجیکٹ مقامی طور پر کلون کریں: ٹرمینل میں git clone https://github.com/CopilotKit/OpenMuse.git openmuse چلائیں، پھر cd openmuse کے ذریعے پروجیکٹ ڈائریکٹری میں جائیں۔
پروجیکٹ کی انحصاری پیکجز انسٹال کریں: پروجیکٹ کی جڑ میں pnpm install --frozen-lockfile چلائیں تاکہ لاک فائل کے مطابق تمام انحصاری پیکجز انسٹال ہوں۔
ماحولیاتی متغیرات کی فائل بنائیں: cp .env.example .env چلائیں اور نمونہ کنفیگریشن کو حقیقی ماحولیاتی متغیرات کی فائل میں نقل کریں۔
لاگ اِن کر کے CopilotKit پروجیکٹ منتخب کریں: پہلے npx copilotkit@latest login چلا کر لاگ اِن کریں، پھر npx copilotkit@latest project select چلا کر Intelligence پروجیکٹ منتخب یا تخلیق کریں۔
Intelligence کلید درج کریں: لاگ اِن کے بعد بننے والی CPK_INTELLIGENCE_API_KEY کو .env فائل میں نقل کریں۔ گفتگو کی مستقل مزاجی کے لیے یہ کلید ضروری ہے۔
بیک اینڈ API سروس شروع کریں: pnpm dev چلائیں۔ شروع ہونے کے بعد localhost:8787/api/health کے ذریعے صحت کی حالت جانچی جا سکتی ہے۔
Web فرنٹ اینڈ شروع کریں: ایک اور ٹرمینل کھول کر pnpm dev:web چلائیں، پھر براؤزر میں localhost:8081 کھولیں۔
بلٹ اِن فیچرز آزمائیں: چیٹ ونڈو میں “Complete the permission slip” بھیج کر PDF فارم پُر کرنے کا عمل آزمائیں۔ آپ Goals → Track میں ویب مانیٹرنگ ٹاسک بھی بنا کر انتباہات آزما سکتے ہیں۔
حقیقی ماڈل ترتیب دیں: .env میں AGENT_BACKEND=model، MODEL=provider/model-id سیٹ کریں اور منتخب فراہم کنندہ (OpenAI، Anthropic یا Google) کی API کلید درج کریں۔
Gmail اور کیلنڈر مربوط کریں: Google Cloud Platform میں OAuth کلائنٹ بنائیں، Gmail اور Calendar API فعال کریں، Client ID اور Secret کو .env میں درج کریں، پھر ایپ کے Apps صفحے پر اکاؤنٹ کی اجازت مکمل کریں۔
براؤزر ورکَر شروع کریں: پہلے pnpm --dir apps/worker exec playwright install chromium چلا کر براؤزر انسٹال کریں، پھر pnpm dev:browser چلا کر براؤزر سروس شروع کریں۔
Linux ورک اسپیس فعال کریں: docker build -t openmuse-computer:local apps/computer چلا کر کنٹینر امیج بنائیں، پھر COMPUTER_ENABLED=true pnpm dev کے ذریعے API شروع کریں تاکہ ورک اسپیس فعال ہو جائے۔
موبائل ایپ چلائیں: iOS ڈیوائس کے لیے pnpm --dir apps/mobile ios، اور Android ڈیوائس کے لیے pnpm --dir apps/mobile android چلائیں۔ مقامی مشین پر Xcode یا Android ٹول چین انسٹال ہونا ضروری ہے۔

حقیقی ایجنٹ ورک اسپیس: مستقل براؤزر اور اختیاری Linux کنٹینر شامل ہیں، جن کے ذریعے ایجنٹ حقیقی طور پر ویب براؤز، کمانڈز پر عمل اور فائلوں پر کارروائی کر سکتا ہے۔
مکمل طور پر قابلِ مشاہدہ اور قابو میں: صارف کسی بھی وقت براؤزر یا ٹرمینل کھول کر ایجنٹ کی کارروائی دیکھ سکتا ہے اور فوراً سیشن کا اختیار سنبھال کر کام جاری رکھ سکتا ہے۔
پسِ منظر میں بلا تعطل کام: کام کا منصوبہ، پیش رفت اور عمل درآمد کا ریکارڈ مستقل محفوظ رہتا ہے۔ فرنٹ اینڈ بند ہونے کے بعد بھی سرور پر کام جاری رہتا ہے اور رکاوٹ کے بعد بحال کیا جا سکتا ہے۔
واضح حفاظتی حدود: ای میل بھیجنے اور کیلنڈر میں تبدیلی جیسے تحریری کاموں کے لیے انسانی تصدیق ضروری ہے۔ اسناد خفیہ انداز میں محفوظ ہوتی ہیں اور کوئی پوشیدہ خودکار دوبارہ کوشش نہیں ہوتی۔
ایک کوڈ بیس، متعدد پلیٹ فارمز: CopilotKit React Native پر مبنی، جو iOS، Android اور Web کو سپورٹ کرتا ہے۔
الگ اور قابلِ تبدیلی معماری: AG-UI پروٹوکول کے ذریعے فرنٹ اینڈ اور بیک اینڈ مربوط ہوتے ہیں، جبکہ ایجنٹ بیک اینڈ کو کسی بھی مطابقت رکھنے والے harness سے بدلا جا سکتا ہے۔
جامع فیچرز: ای میل، کیلنڈر، PDF فارم، ویب مانیٹرنگ اور اخراجات کے تجزیے جیسے ذاتی معاون کے عام استعمال کے منظرنامے پہلے ہی مکمل طور پر مربوط ہیں۔

GitHub ریپوزٹری: https://github.com/CopilotKit/openmuse

ای میل کے کام: معاون خودکار طور پر ای میلز تلاش کرتا، متعلقہ ای میل کھولتا، منسلک PDF پڑھنے کے بعد آپ سے مطلوبہ معلومات لیتا، فارم کی نقل پُر کرتا اور جواب کا مسودہ تیار کرتا ہے، جو ایک کلک سے تصدیق اور ارسال کے لیے تیار ہوتا ہے۔
ویب تحقیق اور معلومات جمع کرنا: Hacker News براؤز کریں یا کسی موضوع پر تحقیق کریں۔ براؤزر اور خلاصے کے نتائج براہِ راست چیٹ میں دکھائے جاتے ہیں، اور آپ کسی بھی وقت Take control کے ذریعے مداخلت کر کے سمت درست کر سکتے ہیں۔
قیمت اور اسٹاک کی نگرانی: مقصد مقرر کرنے کے بعد پروڈکٹ صفحے کی باقاعدہ جانچ کی جاتی ہے۔ اسٹاک واپس آنے یا USD قیمت مقررہ حد سے کم ہونے پر خودکار انتباہ دیا جاتا ہے، جو خریداری اور قیمت کے موازنے کے لیے موزوں ہے۔
شیڈول اور تقریبات کا انتظام: Gmail/کیلنڈر OAuth کے ذریعے مربوط ہو کر ای میل میں موجود تقریب کی معلومات تلاش کریں، کیلنڈر ایونٹس بنائیں یا تبدیل کریں۔ ہر تبدیلی کے لیے آپ کی تصدیق ضروری ہے۔
ذاتی مالیاتی انتظام: بینک ٹرانزیکشن CSV درآمد کریں، خودکار طور پر زمرہ وار اخراجات کا خلاصہ اور بچت کے اہداف کی تجاویز تیار کریں، اور ایک قابلِ تعامل مالیاتی ڈیش بورڈ بنائیں۔