微软发布多智能体 Web 操作系统!让 AI 成为真正“可控、协同、透明”的网页执行助手!

 

继 Magentic-One 后,微软在此基础上推出了新一代多智能体 Web 操作系统:Magentic-UI

一个由多智能体系统驱动的 Web 自动化工具,能:

  • • 自动浏览网页、点击、填写表单等操作
  • • 生成并执行代码,对网页数据或文件进行分析处理
  • • 多智能体协同工作,具备协同规划 + 协同执行能力
  • • 自动保存成功的任务流程,用于后续快速复用

简单说:它是一个可理解网页 + 可写代码 + 可执行操作的超级AI助手!

Magentic-UI 与其他浏览器使用产品不同的地方在于其透明且可控的界面。它基于 AutoGen 框架,集成了强大的多智能体协作能力,支持用户随时介入、暂停或接管操作,还能保存成功计划以复用,效率和安全性兼得。

主要功能

  • • 协同规划:通过聊天和计划编辑器共同创建和批准逐步计划。
  • • 协同任务:直接通过网页浏览器或通过聊天中断并引导任务执行。Magentic-UI 还可以在需要时请求澄清并提供帮助。
  • • 操作保护:敏感操作只有在获得用户明确批准后才会执行。
  • • 计划学习和检索:从前次运行中学习,以改进未来的任务自动化,并将它们保存到计划图库中。在未来的任务中自动或手动检索保存的计划。
  • • 并行任务执行:您可以并行运行多个任务,会话状态指示器会告诉您何时需要您的输入或任务已完成。
  • • 多智能体协作:网页操作、代码生成/执行、文件处理,分工明确,效率翻倍。
  • • 多场景适用:支持网页数据抓取、表单填写、代码分析、文件处理,适合数据分析、自动化任务、软件开发等场景。

快速入手

Magentic-UI 的安装和使用非常友好,官方提供详细文档(GitHub),支持本地和云端(Azure)部署。

① 安装 Python 3.10+ 和虚拟环境

python3 -m venv .venv
source .venv/bin/activate

② 使用 pip 安装Magentic-UI

pip install magentic-ui

③ 启动端口服务

magentic ui --port 8081

如果要使用 Azure 模型或 Ollama,请安装可选依赖项:

# for Azure
pip install magentic-ui[azure] 
# for Ollama
pip install magentic-ui[ollama]

当然也支持,前后端的源代码构建,详细操作流程可在项目Readme文档中查看。

最后浏览器访问 http://localhost:8000,左侧面板创建任务会话,右侧显示计划和浏览器操作。

适用场景

Magentic-UI的透明性和多功能性让它适用于多种复杂场景:

  • • 网页数据抓取与分析:自动从网站提取数据(如价格、评论),生成Python代码分析,适合市场研究或数据科学。
  • • 自动化表单填写:处理复杂表单(如预订餐厅、购买产品),用户批准每步,安全又高效。
  • • 代码生成与调试:从网页提取代码片段(如C++函数),自动生成测试用例或优化代码,助力开发。
  • • 文件处理与报告:分析本地文件(如PDF、CSV),生成Markdown报告,适合科研或业务分析。
  • • 任务自动化:自动化多步任务(如“查找航班+生成价格图表”),计划复用让重复任务更高效。

写在最后

Magentic-UI 使用微软开源的 Magentic 系列作为智能体协调核心,可浏览网页、操作 DOM、执行 JS/脚本、使用代码分析工具。

更重要的是,它让你全程掌控:协同规划、随时干预、安全防护,每一步都透明可控。

用户可实时接管任务(人机混合协同执行),支持 UI 交互 + 命令式操作,适合开发者和非技术人员。

如果你想让 AI 自动帮你浏览网页、点击、搜集信息、写代码分析数据,Magentic-UI 是一款很不错的开源方案之一!

GitHub 项目地址:https://github.com/microsoft/Magentic-UI

 

● 一款改变你视频下载体验的神器:MediaGo

● 字节把 Coze 核心开源了!可视化工作流引擎 FlowGram 上线,AI 赋能可视化流程!

● 英伟达开源语音识别模型!0.6B 参数登顶 ASR 榜单,1 秒转录 60 分钟音频!

● 开发者的文档收割机来了!这个开源工具让你一小时干完一周的活!

● PDF文档解剖术!OCR神器+1,这个开源工具把复杂排版秒变结构化数据!








(文:开源星探)

发表评论

×

下载每时AI手机APP

 

和大家一起交流AI最新资讯!

立即前往