尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
如何快速上手 HanaAgent:Computer Use 与浏览器自动化,让 AI 替你操作电脑全解析
如何快速上手 HanaAgentComputer Use 与浏览器自动化让 AI 替你操作电脑全解析【免费下载链接】openhanakoA personal AI agent with memory, personality, and autonomy.项目地址: https://gitcode.com/gh_mirrors/op/openhanakoHanaAgentopenhanako是一个自带记忆、人格与自主性的个人 AI 智能体它的 Computer Use电脑操作与浏览器自动化Browser Automation两大能力能让 AI 像人一样操作桌面应用、点击网页、填写表单成为新手也能快速上手的 AI 自动化助手。一、Computer UseAI 如何操作你的桌面应用HanaAgent 的电脑控制能力位于 core/computer-use/核心工具入口是 computer-use-tool.ts对外暴露一个名为computer的工具。1. 支持哪些平台平台支持规则定义在 platform-support.ts平台默认驱动说明macOSmacos:cua基于系统 CUA计算机使用助手接口Windowswindows:uia基于 UIA 无障碍接口Linuxmock仅模拟不执行真实操作每个平台的默认驱动配置在 provider-contract.ts 中可按需修改。2. AI 能执行哪些动作对模型开放的干净接口包含这些动作见 computer-use-tool.tsstatus / list_apps查看状态、列出可操作的桌面应用start获得对某个应用的“操作租约”leaseget_app_state截取应用当前界面并获取无障碍元素树click_element / type_text / press_key / scroll点击元素、输入文本、按键、滚动stop结束操作设计上有两点值得注意按元素操作而不是按坐标乱点。AI 先获取界面元素树再用稳定的elementId点击比“看坐标点屏幕”可靠得多隐藏了高风险动作。click_point、double_click、drag等像素级动作不向模型开放降低误操作风险。3. 安全机制应用级审批 租约Computer Use 默认是关闭的且 Windows 上向应用注入输入也需要单独开启这些保守默认值定义在 settings.ts。当 AI 想启动控制某个应用时会触发应用审批流程弹出确认卡片由你点击“确认/拒绝”见 buildComputerAppApprovalRequest你确认后审批记录会保存下来同一应用后续操作不再反复打扰操作期间以“租约lease”形式管理随时可以stop释放此外Computer Use 要求当前模型支持图像输入视觉模型这个检查在 model-policy.ts 中完成。macOS 端还提供带渐变动画的专属 Hana 光标让 AI 的点击轨迹清晰可见macos-cua-provider.ts。二、浏览器自动化AI 替你上网冲浪浏览器控制是另一个独立工具代码位于 browser-tool.ts由 browser-manager.ts 管理浏览器生命周期。1. 浏览器工具支持哪些操作browser工具共提供 13 个子命令见 browser-tool.ts类型动作生命周期start启动、stop关闭、show窗口置前导航navigate打开网址、wait等待加载感知snapshot获取无障碍树、screenshot截图交互click、type、scroll、select、key高级evaluate执行页面 JavaScript2. 为什么它快又省AXTree 感知浏览器工具的核心设计是“文本为主、截图为辅”snapshot通过遍历页面 DOM给可交互元素注入data-hana-ref引用见 browser-manager.ts 注释AI 读到的是廉价的无障碍树文本而非一张张截图screenshot仅作为视觉辅助且可以关闭每次动作都会附带running / url / thumbnail状态推送到前端你可以实时看到浏览器缩略图3. 会话隔离与状态保留浏览器自动化对多任务非常友好每个会话独立一个浏览器多开互不干扰最多 5 个并发实例超出时按 LRU 淘汰最久未用的browser-manager.ts切换会话不丢状态切走时浏览器挂起而非销毁切回来表单、滚动位置原样保留登录态持久化Cookies 和 localStorage 由 Electron session 保存AI 帮你登录过的网站下次还认得你闲置自动回收30 分钟无操作后冷保存重启后还能恢复 URL操作日志每个会话记录最近 200 步操作browser-action-log.ts便于回看和纠错零额外依赖直接复用 Electron 内核不需要下载 Chromium 或 Playwright三、两者怎么选场景推荐能力操作微信、备忘录等桌面 AppComputer Use打开网页、填表单、抓数据浏览器自动化需要登录态的重复任务浏览器自动化登录态持久化界面复杂、元素不可枚举Computer Use带视觉模型给新手的建议先在设置里确认 Computer Use 已启用默认关闭并选用支持图像输入的模型首次让 AI 操作某个应用时留意弹窗审批卡片——这是你的“刹车”网页类任务优先用浏览器工具文本感知更快、更省 token需要随时叫停时直接让 AI 执行stop或关闭对应会话即可。小结HanaAgent 用 Computer Use 打通了 AI 与桌面应用的“最后一公里”又用会话隔离、文本优先的浏览器自动化让网页任务又快又稳。配合审批、租约与操作日志等安全设计即使新手也能放心地把重复性操作交给这位有记忆、有人格的 AI 助手。【免费下载链接】openhanakoA personal AI agent with memory, personality, and autonomy.项目地址: https://gitcode.com/gh_mirrors/op/openhanako创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
RELATED

相关推荐

free-stockdb与pandas全市场指标计算横评:39指标耗时实测差距有多大

free-stockdb与pandas全市场指标计算横评:39指标耗时实测差距有多大

free-stockdb与pandas全市场指标计算横评:39指标耗时实测差距有多大 【免费下载链接】free-stockdb 面向 A 股日K、分钟K与ETF分钟数据的本地量化引擎,集成增量同步、本地缓存、复权、批量查询、回测与指标计算。 项目地址: https://gitcode.com/GitHu…

📅 2026/11/9 0:04:09
从谷歌地图Ask Maps升级看LLM智能体架构:技术拆解与开发实践

从谷歌地图Ask Maps升级看LLM智能体架构:技术拆解与开发实践

这类工具最值得先看的不是功能列表,而是能不能在普通环境里稳定跑起来。谷歌地图的“Ask Maps”智能体升级,核心是把一个传统的地图导航工具,变成了一个能对话、能帮你找餐厅订位、找酒店、甚至整合个人日程的“生活助理”。它背后接入了Gemi…

📅 2026/9/26 3:54:20
电视直播应用 my-tv:免费装进电视盒子,十分钟看直播

电视直播应用 my-tv:免费装进电视盒子,十分钟看直播

电视直播应用 my-tv:免费装进电视盒子,十分钟看直播 【免费下载链接】my-tv 我的电视 电视直播软件,安装即可使用 项目地址: https://gitcode.com/GitHub_Trending/my/my-tv 周六晚上想全家一起看台里直播,可电视上翻来翻去…

📅 2026/11/6 16:53:29
MORE NEWS

更多资讯

📰

深圳哪里有办理电工证在哪考别再踩坑了

深圳哪里有办理电工证在哪考别再踩坑了 怕考不过白交培训费?深圳哪里有办理电工证?别急,听我一句劝, 千万别找那些打着“包过”旗号的培训机构 ,你花的钱可能打水漂,耽误的还是一条路子。尤其是 低压电工证、高压电工证、焊工证、高处作业证…

📰

北京电工证怎么年检 你知道官方报名入口在哪吗

北京电工证怎么年检 你知道官方报名入口在哪吗 现在找工作,手里没个 特种作业证 ,连面试资格都可能没有。尤其是干电工这行, 北京电工证怎么年检…

📰

史密斯内部电工证值不值得考?怕考不过白交培训费的看过来

史密斯内部电工证值不值得考?怕考不过白交培训费的看过来 怕考不过白交培训费?你不是一个人,这正是很多想考史密斯内部电工证的人最担心的问题。尤其是那些已经工作几年,想转行或升职加薪的学员,担心自己花了钱、时间、精力,最后还是考不过,或者证书不…

📰

怎样查看真假电工证怎么考

电工证过期了不知道怎么复审延期?怎么查真假+多少钱全讲透 证书过期了不知道怎么复审延期,是不是你最近遇到的烦心事?别慌,今天我从郑州金水区公路工程一线从业者的角度,给你讲明白【怎样查看真假电工证】,顺便说说复审延期要花多少钱,还能帮你避开那…

📰

金坛办电工证在哪里?考前押题能帮你少走弯路

金坛办电工证在哪里?考前押题能帮你少走弯路 急需特种作业证才能上岗找工作,但你是不是还在为【金坛办电工证在哪里】发愁?别急,今天从一个已经在平顶山参加电工证培训的老学员角度,带你全面了解从报名到考试、再到证书查询的全流程,还有 考前押题…

📰

在丽江如何考电工证官方报名入口在哪里?工地太忙根本没时间复习考试

在丽江如何考电工证官方报名入口在哪里?工地太忙根本没时间复习考试 工地太忙根本没时间复习考试,这几乎是所有一线电工的共同烦恼。特别是在丽江这样的工地上,工期紧、任务重,很多人连抽时间复习电工证考试都成了奢望。但现实是, 电工证…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬