Operator là gì?
Operator là tác nhân AI đầu tiên của OpenAI, được thiết kế để tự động thực hiện các tác vụ trên web. Một tác nhân AI là hệ thống có thể tiếp nhận hướng dẫn, suy luận dựa trên đó và thực thi hành động mà không cần giám sát liên tục từ con người.
Không giống các công cụ tự động hóa truyền thống dựa vào API được xác định trước hoặc quy trình cứng nhắc, Operator tương tác trực tiếp với trang web, mô phỏng hành vi của con người như nhấp chuột, nhập liệu và cuộn trang. Mục tiêu chính của nó là đơn giản hóa các tác vụ số vốn cần nỗ lực thủ công hoặc chuyên môn kỹ thuật.
Điều này khiến nó phù hợp cho các hoạt động thường ngày như quản lý đặt chỗ hoặc điền biểu mẫu, cũng như các quy trình phức tạp nhiều bước. Dưới đây là một ví dụ sử dụng Operator:
Operator sử dụng một trình duyệt ảo để điều hướng các trang web. Môi trường ảo này cho phép nó tương tác với giao diện đồ họa người dùng (GUI) như một người dùng thực thụ. Thay vì yêu cầu trang web có API chuyên biệt, Operator diễn giải bố cục trực quan của trang, nhấp vào nút, nhập vào trường thông tin và cuộn qua nội dung.
Operator dựa vào hướng dẫn bằng ngôn ngữ tự nhiên để hiểu nhu cầu của người dùng. Khi tác vụ đã được đặt ra, nó xử lý hướng dẫn, chia nhỏ thành các bước có thể hành động và thực thi đồng thời cung cấp phản hồi cho người dùng. Operator cũng có thể yêu cầu làm rõ hoặc xác nhận cho các hành động quan trọng, như gửi biểu mẫu hoặc hoàn tất thanh toán, nhằm đảm bảo người dùng kiểm soát tốt kết quả.
Computer-Using Agent (CUA) là gì?
Computer-Using Agent (CUA) là công nghệ cốt lõi vận hành Operator. Kết hợp năng lực thị giác của GPT-4o với khả năng suy luận nâng cao thông qua học tăng cường, CUA được huấn luyện để tương tác với giao diện đồ họa—các nút, menu và trường văn bản hiển thị trên màn hình.
Nhận thức
CUA bắt đầu bằng cách xử lý dữ liệu điểm ảnh thô từ ảnh chụp màn hình. Nó sử dụng thông tin trực quan này để xác định các thành phần giao diện chính như nút bấm, trường nhập liệu và menu điều hướng.
Suy luận
Sau khi phân tích dữ liệu trực quan, CUA áp dụng suy luận theo chuỗi để lập kế hoạch hành động. Bằng cách tích hợp ảnh chụp màn hình hiện tại và trước đó, nó đánh giá quan sát, chia nhỏ tác vụ thành các bước nhỏ hơn và thích ứng linh hoạt với thách thức. Ví dụ, nếu xuất hiện một cửa sổ bật lên trong khi thực hiện tác vụ (như quảng cáo trong ví dụ ở trên), CUA có thể điều chỉnh cách tiếp cận và tìm cách tiếp tục, giống như một người dùng.
Hành động
CUA sử dụng đầu vào chuột và bàn phím ảo để thực hiện các hành động như nhấp, nhập, cuộn và gửi biểu mẫu. Nhờ đó, nó có thể tự chủ thực hiện tác vụ, dù là chọn mục trong danh sách thả xuống hay điều hướng qua một biểu mẫu nhiều bước.
Với các hành động quan trọng—chẳng hạn thanh toán hoặc đăng nhập tài khoản—CUA sẽ xin xác nhận của người dùng trước khi tiếp tục, giúp người dùng duy trì kiểm soát đối với các thao tác nhạy cảm.
Chuẩn đánh giá CUA
CUA đã đạt hiệu năng tiên tiến (SOTA) trên một số benchmarks:
Câu hỏi thường gặp
OpenAI Operator có thể xử lý nhiều hơn một tác vụ cùng lúc không?
Có. Operator được thiết kế để quản lý nhiều tác vụ đồng thời. Bạn có thể có các cuộc hội thoại riêng cho từng tác vụ, và Operator sẽ thực thi song song. Ví dụ, bạn có thể nhờ Operator đặt mua nhu yếu phẩm trên Instacart trong khi đồng thời đặt chỗ trên Booking.com.
Operator của OpenAI có phải là một tác nhân AI không?
Có. OpenAI Operator là một tác nhân AI được thiết kế để tự chủ thực hiện các tác vụ cho bạn. Nó tương tác với trang web bằng cách điều hướng, nhấp chuột và điền biểu mẫu, cho phép bạn tự động hóa hoạt động. Tìm hiểu thêm về tác nhân AI qua bài blog của chúng tôi: Hiểu về Tác nhân AI: Tương lai của các hệ thống tự động.
Operator hoạt động như thế nào?
Được vận hành bởi mô hình Computer-Using Agent (CUA), Operator tương tác với trang web bằng cách xem ảnh chụp màn hình và thực hiện các thao tác chuột, bàn phím. Khi cần, nó có thể tự sửa hoặc yêu cầu người dùng hỗ trợ.
Ai có thể sử dụng Operator ngay bây giờ và bắt đầu như thế nào?
Operator hiện khả dụng cho người dùng Pro tại Mỹ. Nếu bạn có gói Pro, bạn có thể truy cập operator.chatgpt.com để bắt đầu. Hãy mô tả một tác vụ, và Operator sẽ xử lý giúp bạn.
Những hạn chế hiện tại của Operator là gì?
Vì Operator vẫn là bản xem trước phục vụ nghiên cứu, nó có thể gặp khó khăn với các tác vụ phức tạp như tạo trình chiếu hoặc quản lý lịch.
Operator có khả dụng trên thiết bị di động không?
Chưa có xác nhận về hỗ trợ di động cho Operator, nhưng khả năng tương tác với giao diện web có thể giúp nó thích ứng với nền tảng di động trong tương lai khi công nghệ phát triển.
Operator khác gì so với trợ lý giọng nói như Siri hoặc Google Assistant?
Operator tập trung vào các tác vụ dựa trên web và tương tác trực tiếp với trang web, trong khi trợ lý giọng nói truyền thống thường dựa vào tích hợp ứng dụng hoặc API được xác định trước. Khả năng mô phỏng hành động của con người như nhấp và cuộn giúp Operator linh hoạt hơn cho các tác vụ trực tuyến phức tạp.
Operator có xử lý được các trang web dùng CAPTCHA hoặc tính năng bảo mật nâng cao không?
Hiện Operator dựa vào đầu vào của người dùng cho các tác vụ liên quan đến CAPTCHA hoặc đăng nhập nhạy cảm. Nó không tự động vượt qua các hệ thống này nhưng có thể tiếp tục quy trình sau khi các rào cản đó được xử lý.

Tôi là biên tập viên và tác giả phụ trách blog, hướng dẫn và tin tức về AI, bảo đảm mọi nội dung phù hợp với chiến lược nội dung vững chắc và các thực tiễn SEO tốt nhất. Tôi đã viết các khóa học khoa học dữ liệu về Python, thống kê, xác suất và trực quan hóa dữ liệu. Tôi cũng đã xuất bản một tiểu thuyết đoạt giải và dành thời gian rảnh cho việc viết kịch bản và đạo diễn phim.

Tác giả
Josef Waples
Tôi là một cây bút và biên tập viên về khoa học dữ liệu, đã có bài đóng góp cho các nghiên cứu đăng trên tạp chí khoa học. Tôi đặc biệt quan tâm đến đại số tuyến tính, thống kê, R và các chủ đề tương tự. Tôi cũng chơi cờ vua khá thường xuyên!



Gần đây OpenAI đã công bố Operator, một tác nhân AI được thiết kế để tự mình xử lý các tác vụ trên web. Nó có thể đảm nhiệm các việc như đặt bàn hoặc mua sắm trực tuyến, đơn giản hóa tương tác số cho những công việc thường ngày.
Tuy nhiên, chúng tôi cho rằng tiềm năng của nó vượt xa sự tiện lợi—nó có thể trao quyền cho những người thiếu kỹ năng máy tính bằng cách giúp họ hoàn thành các tác vụ như điền biểu mẫu hoặc điều hướng các trang web phức tạp một cách dễ dàng.
Ngoài ra, với việc tích hợp sâu hơn các lệnh thoại, nó có thể mang đến giải pháp dễ tiếp cận hơn cho người khuyết tật, chẳng hạn người khiếm thị.
Operator bước vào một sân chơi cạnh tranh gồm khả năng sử dụng máy tính của Anthropic và Project Mariner của Google. Một điểm khác biệt là công cụ của Anthropic hiện cần kiến thức lập trình (ở thời điểm này), trong khi Operator cho phép người dùng đưa ra hướng dẫn bằng ngôn ngữ tự nhiên, giúp nó dễ tiếp cận hơn.
Trong bài blog này, chúng tôi sẽ giải thích Operator là gì, khám phá công nghệ cốt lõi của nó (CUA), nêu các trường hợp sử dụng và hạn chế, đồng thời bàn về vị trí của nó trong bối cảnh rộng hơn của các tác nhân AI. Chúng tôi cũng đã tạo một video một phút để bạn có cái nhìn nhanh: