freemcplab / الدليل / الملعب / UI-TARS Desktop

● رسمي bytedance ⚡ فوري

UI-TARS Desktop

Name: UI-TARS Desktop MCP Server
Author: bytedance

بواسطة bytedance · bytedance/UI-TARS-desktop

ByteDance's open multimodal agent stack — vision-grounded computer-use, callable from Claude via MCP.

UI-TARS Desktop is ByteDance's open multimodal agent platform. It uses screen understanding for desktop control and exposes itself as MCP. Claude can delegate vision-grounded GUI tasks where text-only tools fall short.

▶ شاهد العرض 📦 التثبيت 💡 حالات الاستخدام

لماذا تستخدمه

الميزات الأساسية

Vision-grounded GUI control
Multi-model backend
MCP surface
Replay + audit
Open from a large company
Cross-platform desktop

عرض مباشر

كيف يبدو في الممارسة

جاهز

التثبيت

اختر العميل

~/Library/Application Support/Claude/claude_desktop_config.json · Windows: %APPDATA%\Claude\claude_desktop_config.json

{
  "mcpServers": {
    "ui-tars-desktop-mcp": {
      "command": "docker",
      "args": [
        "run",
        "-p",
        "8080:8080",
        "ghcr.io/bytedance/ui-tars-desktop:latest"
      ]
    }
  }
}

افتح Claude Desktop → Settings → Developer → Edit Config. أعد التشغيل بعد الحفظ.

~/.cursor/mcp.json · .cursor/mcp.json

{
  "mcpServers": {
    "ui-tars-desktop-mcp": {
      "command": "docker",
      "args": [
        "run",
        "-p",
        "8080:8080",
        "ghcr.io/bytedance/ui-tars-desktop:latest"
      ]
    }
  }
}

يستخدم Cursor نفس مخطط mcpServers مثل Claude Desktop. إعدادات المشروع أولى من الإعدادات العامة.

VS Code → Cline → MCP Servers → Edit

{
  "mcpServers": {
    "ui-tars-desktop-mcp": {
      "command": "docker",
      "args": [
        "run",
        "-p",
        "8080:8080",
        "ghcr.io/bytedance/ui-tars-desktop:latest"
      ]
    }
  }
}

انقر على أيقونة MCP Servers في شريط Cline الجانبي، ثم "Edit Configuration".

~/.codeium/windsurf/mcp_config.json

{
  "mcpServers": {
    "ui-tars-desktop-mcp": {
      "command": "docker",
      "args": [
        "run",
        "-p",
        "8080:8080",
        "ghcr.io/bytedance/ui-tars-desktop:latest"
      ]
    }
  }
}

نفس الصيغة مثل Claude Desktop. أعد تشغيل Windsurf لتطبيق التغييرات.

~/.continue/config.json

{
  "mcpServers": [
    {
      "name": "ui-tars-desktop-mcp",
      "command": "docker",
      "args": [
        "run",
        "-p",
        "8080:8080",
        "ghcr.io/bytedance/ui-tars-desktop:latest"
      ]
    }
  ]
}

يستخدم Continue مصفوفة من كائنات الخادم بدلاً من خريطة.

~/.config/zed/settings.json

{
  "context_servers": {
    "ui-tars-desktop-mcp": {
      "command": {
        "path": "docker",
        "args": [
          "run",
          "-p",
          "8080:8080",
          "ghcr.io/bytedance/ui-tars-desktop:latest"
        ]
      }
    }
  }
}

أضف إلى context_servers. يعيد Zed التحميل تلقائيًا عند الحفظ.

claude mcp add ui-tars-desktop-mcp -- docker run -p 8080:8080 ghcr.io/bytedance/ui-tars-desktop:latest

أمر من سطر واحد. تحقق باستخدام claude mcp list. احذف باستخدام claude mcp remove.

حالات الاستخدام

استخدامات عملية: UI-TARS Desktop

Drive a GUI app via vision when DOM selectors fail

👤 Developers ⏱ ~15 min intermediate

متى تستخدمه: You're automating a desktop or canvas app that has no scripting surface.

الخطوات

Bridge

Run UI-TARS; register with Claude.✓ تم النسخ

→ Tool visible
Delegate

Ask Claude to delegate the GUI step.✓ تم النسخ

→ UI-TARS clicks, types
Verify

Replay the screen trace.✓ تم النسخ

→ Audit done

النتيجة: GUI automation in apps with no API.

التركيبات

اجمعها مع خوادم MCP أخرى لتحقيق نتائج x10

ui-tars-desktop-mcp + openagent-mcp

UI-TARS for vision tasks; OpenAgent for code-text tasks

Combine ui-tars-desktop-mcp with openagent-mcp: UI-TARS for vision tasks; OpenAgent for code-text tasks✓ تم النسخ

الأدوات

ما يوفره هذا الـ MCP

الأداة	المدخلات	متى تستدعيها	التكلفة
ui_act	(see docs)	Run a vision-grounded GUI action	1 call
ui_observe	(see docs)	Capture screen state	1 call

التكلفة والحدود

تكلفة التشغيل

حصة API: Local resources + LLM
الرموز لكل استدعاء: Screen-capture is heavy
التكلفة المالية: Free OSS; provider costs
نصيحة: Crop the screen region you care about before sending

الأمان

الصلاحيات والأسرار ونطاق الأثر

الحد الأدنى من الصلاحيات: screen-capture input-injection

تخزين بيانات الاعتماد: Replays on disk

نقل البيانات الخارجي: Configured providers

لا تمنح أبدًا: Run with banking app visible

استكشاف الأخطاء

الأخطاء الشائعة وحلولها

Action misses target on Retina display

Set the DPI scale; UI-TARS defaults to 1x

البدائل

UI-TARS Desktop مقابل البدائل

البديل	متى تستخدمها	المقايضة
OpenAgent	Lower resource cost	Less vision grounding