awlevin/typesafe-computer-use

Public

Computer use for about $0.0002 a step: OCR the screen, classify the next action with TypeSafe, click. macOS.

Beeknoee

Bee AI phân tích repositoryBETA

AI đọc README và cây file để tóm tắt, gợi ý cách dùng và đánh giá repository. Mọi con số lấy từ kho Bee, không do AI ước lượng.

Cập nhật lần cuối: 29/09/2026

Đăng nhập để hỏi Bee AI

Tóm tắt bởi Bee AI

typesafe-computer-use là công cụ điều khiển giao diện máy tính (computer-use) cho macOS và Windows, kết hợp nhận diện màn hình qua OCR hoặc DOM với bộ phân loại TypeSafe tốc độ cao và chỉ gọi mô hình ngôn ngữ lớn khi cần nhập văn bản.

  • Sử dụng mô hình phân loại TypeSafe để đưa ra quyết định hành động nhanh và tiết kiệm chi phí so với việc gọi mô hình frontier ở mọi bước.
  • Hỗ trợ backend trình duyệt đọc trực tiếp DOM qua Chrome DevTools Protocol thay vì xử lý ảnh chụp màn hình qua OCR.
  • Tích hợp tính năng an toàn dừng khẩn cấp bằng cách di chuột vào góc trên bên trái màn hình hoặc nhấn phím Ctrl-C.
  • Tự động phát hiện trạng thái treo khi màn hình không thay đổi sau nhiều hành động liên tiếp.

Lưu ý

  • Dự án đang trong giai đoạn Beta và đang phát triển mạnh, cấu hình và hành vi có thể thay đổi giữa các phiên bản 0.x.
  • Hỗ trợ Windows ở mức thử nghiệm và chưa được kiểm thử toàn diện trên phần cứng Windows thực tế.
  • Chương trình điều khiển chuột và phím thật, đòi hỏi cấp quyền Screen Recording và Accessibility trên macOS.

Điểm BeeTính thuần từ số liệu trong kho Bee, không phải AI chấm: bách phân vị sao 30% · độ tươi lần push 25% · fork và watcher 15% · README, giấy phép, mô tả 20% · có bản phát hành 10%.

  • Độ phổ biến26
  • Độ tươi80
  • Cộng đồng30
  • Tài liệu100
  • Phát hành20
  • Mức độ khóTrung bình
  • Phù hợp vớiLập trình viên · Nhà nghiên cứu
  • Loại dự ánCông cụ
  • Giấy phépMIT

Kiến trúc & Công nghệ

Công nghệ AI nhận ra từ README và cây file — chỉ những mục nằm trong danh sách Bee kiểm.

Tech stack

  • Python
  • Anthropic API
  • OpenAI API
  • Docker

Kiến trúc tổng quan

Repository → công nghệ chính → các thư mục cấp 1 có thật trong repo; vai trò do AI mô tả.

  • typesafe_computer_use/Mã nguồn chính của bộ điều khiển, các backend OCR và DOM
  • bench/Kịch bản và công cụ đo lường hiệu năng của agent
  • benchmarks/Bộ dữ liệu và kịch bản benchmark so sánh
  • tests/Bộ kiểm thử đơn vị và tích hợp cho các quy tắc xử lý
  • scripts/Các script hỗ trợ kiểm tra và vận hành
  • sandbox/Môi trường sandbox để thử nghiệm cách ly
  • docs/Tài liệu kiến trúc và hướng dẫn kỹ thuật
  • infra/Cấu hình hạ tầng triển khai và môi trường chạy

Hướng dẫn nhanh

Các bước để bắt đầu với repository này.

bash
git clone https://github.com/awlevin/typesafe-computer-use.git
cd typesafe-computer-use

Các use case chính

Những ứng dụng có thể xây dựng từ repository này.

  • Tự động hóa các tác vụ lặp lại trên màn hình desktop macOS hoặc Windows theo mục tiêu ngôn ngữ tự nhiên.
  • Thực hiện điều hướng và thao tác kiểm thử trình duyệt Chrome mà không cần cấp quyền quay màn hình.
  • Ghi nhận và phát lại ngoại tuyến các bước tương tác của agent từ dữ liệu đã lưu để gỡ lỗi.

Repository tương tự

Cùng chủ đề trong kho Bee.

  1. 1affaan-m/ECCThe agent harness performance optimization system. Skills, instincts, memory, security, and research-first development for Claude Code, Codex, Opencode, Cursor and beyond.280.2k+5.3k
  2. 2NousResearch/hermes-agentThe agent that grows with you254.1k+2.2k
  3. 3deepseek-ai/deepseek-harnessDeepSeek Harness: Everything is a Plugin.250.4k+5.2k
  4. 4morluto/reaReverse engineer anything with agents, from app behavior down to native binaries.239.5k+138k
  5. 5n8n-io/n8nFair-code workflow automation platform with native AI capabilities. Combine visual building with custom code, self-host or cloud, 400+ integrations.207.5k+687

Nội dung do AI sinh, có thể sai hoặc thiếu — số liệu lấy từ kho Bee, không do AI ước lượng. Cập nhật lần cuối: 29/09/2026.