从化区城郊街道网站麻二村生态建设安康市建设银行网站

从化区城郊街道网站麻二村生态建设,安康市建设银行网站,网站如何做谷歌优化,珠海免费建站Open-AutoGLM 实战#xff1a;手把手教你用 AI 做App自动化测试「喂饭教程」前言开始之前的几点说明准备工作第一步#xff1a;Python 环境第二步#xff1a;安装 ADB 工具第三步#xff1a;准备你的 Android 手机快速部署#xff1a;10 分钟搞定克隆项目到本地创建独立的…Open-AutoGLM 实战手把手教你用 AI 做App自动化测试「喂饭教程」前言开始之前的几点说明准备工作第一步Python 环境第二步安装 ADB 工具第三步准备你的 Android 手机快速部署10 分钟搞定克隆项目到本地创建独立的 Python 环境安装依赖包选择模型方案云端 API vs 本地部署方案一直接用云端 API新手推荐方案二本地部署模型适合有 GPU 的玩家测试一下确保一切正常检查手机连接远程设备连接验证模型服务本地部署用户跑个简单任务试试实战使用三种玩法玩法一命令行直接下指令玩法二写 Python 脚本自动化玩法三定时任务 自动化脚本支持的应用生态AI 能做哪些操作踩坑指南常见问题速查问题 1ADB 找不到设备问题 2能打开 App但点不了任何东西问题 3无法输入中文问题 4截图显示黑屏问题 5Windows 下中文乱码问题 6模型响应很慢问题 7任务执行到一半卡住使用技巧让 AI 更听话指令要具体明确复杂任务拆分成步骤善用交互模式涉及隐私的操作要谨慎进阶玩法一些有趣的应用场景场景 1自动化测试场景 2定时任务场景 3批量操作场景 4数据采集性能与成本云端 API 方案本地部署方案总结前言Open-AutoGLM是一个由智谱AI开源的手机操作智能体框架由手机端智能助手框架Phone Agent和9B大小的模型AutoGLM-Phone-9B组成借助ADB自动执行点击、滑动、输入等操作——用户只需用自然语言描述任务系统便能自动规划并完成整个操作流程。我在实际部署和使用过程中踩了不少坑也积累了一些经验。这篇文章会用最直白的语言带你从零搭建10 分钟完成环境配置和项目部署避开大坑我踩过的 7 个常见问题和解决方案实战技巧如何让 AI 更听话、执行更准确进阶玩法自动化测试、定时任务、批量操作等实用场景开始之前的几点说明关于成本如果你没有高性能显卡用云端 API 就行成本大概是 0.1-0.5 元/次操作。如果你有 RTX 3090 以上的显卡可以考虑本地部署一次性投入后就是电费成本。关于隐私这个工具需要截取手机屏幕并发送给 AI 模型分析。如果你用的是云端 API截图会上传到服务器。涉及敏感信息的操作支付、银行、身份证等建议人工接管或者用本地部署方案。关于合规自动化操作可能违反某些平台的服务条款。使用前请确认你的用途是否合规不要用于刷量、作弊等违规行为。好了废话不多说开始干活。准备工作在开始之前你需要准备好三样东西。我在实际部署时踩过不少坑这里把关键点都标出来了。第一步Python 环境确保你的 Python 版本在 3.10 。用python --version检查一下如果版本太低后面会遇到各种兼容性问题。第二步安装 ADB 工具ADB 是 Android Debug Bridge 的缩写简单说就是让电脑能够遥控手机的工具。下载方式访问 Android 官方平台工具页面根据你的系统下载对应版本Windows/Mac/Linux配置环境变量Windows 用户解压后把platform-tools文件夹路径添加到系统环境变量 Path 中。不会配置的话搜索ADB Windows 环境变量配置有大把教程Mac 用户在终端执行export PATH${PATH}:~/Downloads/platform-tools假设你解压到了 Downloads 目录配置完成后在命令行输入adb version如果能看到版本号就说明成功了。第三步准备你的 Android 手机系统要求Android 7.0 及以上太老的手机可能不支持开启调试模式进入手机设置 → “关于手机”连续点击版本号7 次开启开发者模式返回设置找到开发者选项打开USB 调试和USB 调试安全设置后者很多人会漏掉导致无法点击安装 ADB Keyboard这是一个特殊的输入法让电脑能够向手机输入中文下载地址ADB Keyboard APK在命令行输入adb install “your_downloads_path\ADBKeyboard.apk” 进行安装在手机的输入法设置中启用它快速部署10 分钟搞定克隆项目到本地gitclone https://github.com/zai-org/Open-AutoGLM.gitcdOpen-AutoGLM创建独立的 Python 环境为什么要用虚拟环境因为这个项目依赖很多直接装到全局可能会和你其他项目冲突。Windows 用户python -m venv venv venv\Scripts\activateMac/Linux 用户python3 -m venv venvsourcevenv/bin/activate激活成功后命令行前面会出现(venv)标识。安装依赖包# 使用清华镜像源速度更快pipinstall-r requirements.txt -i https://pypi.tuna.tsinghua.edu.cn/simple pipinstall-e.这一步可能需要几分钟耐心等待。如果遇到网络问题多试几次或者换个镜像源。选择模型方案云端 API vs 本地部署这是最关键的一步。你有两个选择根据自己的情况来定。方案一直接用云端 API新手推荐如果你没有高性能显卡或者只是想快速体验用云端 API 是最省事的。智谱 AI 的 BigModel 平台我个人在用的访问 智谱 AI 开放平台注册账号创建 API Key新用户有免费额度运行命令python main.py --base-url https://open.bigmodel.cn/api/paas/v4 --modelautoglm-phone--apikey你的API密钥打开美团搜索附近的粤菜馆ModelScope 魔搭社区国内访问稳定python main.py --base-url https://api-inference.modelscope.cn/v1 --modelZhipuAI/AutoGLM-Phone-9B--apikey你的API密钥打开美团搜索附近的粤菜馆方案二本地部署模型适合有 GPU 的玩家如果你有一张显存 16GB 的显卡比如 RTX 4090、A100可以考虑本地部署。优点是响应快、不花钱缺点是配置麻烦。使用 vLLM 部署性能最优Linux/Mac 用户python3 -m vllm.entrypoints.openai.api_server\--served-model-name autoglm-phone-9b\--model zai-org/AutoGLM-Phone-9B\--port8000\--allowed-local-media-path /\--mm-encoder-tp-mode data\--mm_processor_cache_type shm\--mm_processor_kwargs{\max_pixels\:5000000}\--max-model-len25480\--chat-template-content-format string\--limit-mm-per-prompt{\image\:10}Windows CMD 用户python -m vllm.entrypoints.openai.api_server ^ --served-model-name autoglm-phone-9b ^ --model zai-org/AutoGLM-Phone-9B ^ --port 8000 ^ --allowed-local-media-path / ^ --mm-encoder-tp-mode data ^ --mm_processor_cache_type shm ^ --mm_processor_kwargs {\max_pixels\:5000000} ^ --max-model-len 25480 ^ --chat-template-content-format string ^ --limit-mm-per-prompt {\image\:10}Windows PowerShell 用户python-m vllm.entrypoints.openai.api_server --served-model-name autoglm-phone-9b --model zai-org/AutoGLM-Phone-9B --port 8000 --allowed-local-media-path/--mm-encoder-tp-modedata--mm_processor_cache_type shm --mm_processor_kwargs{\max_pixels\:5000000}--max-model-len 25480 --chat-template-cont启动后模型会在本地 8000 端口运行。第一次启动会下载模型文件约 18GB需要点时间。测试一下确保一切正常在正式使用前先跑个测试确认系统能正常工作。检查手机连接adb devices如果看到你的设备 ID 和device字样说明连接成功。如果显示unauthorized去手机上确认一下 USB 调试授权。远程设备连接如果要控制不在身边的手机可以使用无线连接# 连接远程设备手机需开启无线调试adb connect xxx.xxx.x.xxx:xxxx# 断开指定设备adb disconnect xxx.xxx.x.xxx:xxxx# 再次检查设备列表adb devices验证模型服务本地部署用户python scripts/check_deployment_cn.py --base-url http://localhost:8000/v1 --model autoglm-phone-9b跑个简单任务试试python main.py --base-url http://localhost:8000/v1\--modelautoglm-phone-9b\打开微信对文件传输助手发送消息测试成功如果一切顺利你会看到手机自动打开微信、找到文件传输助手、发送消息。第一次看到这个场景还是挺震撼的。实战使用三种玩法玩法一命令行直接下指令最简单直接的方式适合快速执行单个任务。这里以网易云音乐为例需要预先登录账号# 执行单个任务使用智谱 AI 云端 APIpython main.py --base-url https://open.bigmodel.cn/api/paas/v4 --modelautoglm-phone--apikey你的API密钥打开网易云音乐搜索张学友的《活出生命Live演唱会》这张专辑并播放# 指定远程设备执行单个任务python main.py --device-id192.168.1.100:5555 --base-url https://open.bigmodel.cn/api/paas/v4 --modelautoglm-phone--apikey你的API密钥打开网易云音乐搜索张学友的《活出生命Live演唱会》这张专辑并播放# 交互模式可以连续下多个指令python main.py --base-url https://open.bigmodel.cn/api/paas/v4 --modelautoglm-phone--apikey你的API密钥# 远程设备交互模式python main.py --device-id xxx.xxx.x.xxx:xxxx --base-url https://open.bigmodel.cn/api/paas/v4 --modelautoglm-phone--apikey你的API密钥进入交互模式后你可以像聊天一样输入指令比如“打开网易云音乐播放我的日推歌单”“在网易云音乐搜索林俊杰的歌曲”“切换到下一首歌曲”“收藏当前播放的歌曲”# 查看支持哪些应用python main.py --list-apps# 使用英文指令如果你的手机是英文系统python main.py --lang en --base-url https://open.bigmodel.cn/api/paas/v4 --modelautoglm-phone--apikey你的API密钥Open Chrome browser玩法二写 Python 脚本自动化如果你想把手机操作集成到自己的项目里可以用 Python API。fromphone_agentimportPhoneAgentfromphone_agent.modelimportModelConfig# 配置模型连接使用智谱 AI 云端 APImodel_configModelConfig(base_urlhttps://open.bigmodel.cn/api/paas/v4,model_nameautoglm-phone,api_key你的API密钥)# 初始化 AgentagentPhoneAgent(model_configmodel_config)# 执行任务resultagent.run(打开网易云音乐搜索纯音乐歌单)print(f任务结果{result})这种方式的好处是可以批量执行任务或者根据条件动态生成指令。玩法三定时任务 自动化脚本结合系统的定时任务功能可以实现一些有趣的自动化场景每天早上 8 点自动打开新闻 App 浏览头条每小时检查一次某个商品的价格定时在社交平台发布内容支持的应用生态目前系统已经适配了 50 多款国内主流 App基本覆盖了日常使用场景类别应用列表社交通讯微信、QQ、微博、钉钉电商购物淘宝、京东、拼多多、闲鱼美食外卖美团、饿了么、肯德基、麦当劳出行旅游携程、12306、滴滴出行、高铁管家视频娱乐bilibili、抖音、快手、爱奇艺、腾讯视频音乐音频网易云音乐、QQ 音乐、喜马拉雅、酷狗音乐生活服务大众点评、高德地图、百度地图、支付宝内容社区小红书、知乎、豆瓣、贴吧实测体验电商类 App淘宝、京东的搜索和浏览功能识别率最高社交类 App微信、QQ在发消息方面表现稳定视频类 App抖音、B 站的滑动和搜索也很流畅复杂的支付流程建议人工介入AI 能做哪些操作系统内置了 10 种基础操作组合起来可以完成大部分手机任务操作说明使用场景Launch启动应用“打开微信”、“启动淘宝”Tap点击屏幕点击按钮、选择选项Type输入文字搜索关键词、发送消息Swipe滑动屏幕上下滚动、左右切换Back返回上一页退出当前页面Home回到桌面结束任务Long Press长按复制文字、调出菜单Double Tap双击点赞、放大图片Wait等待加载页面跳转、网络请求Take_over人工接管登录验证、验证码输入关于 Take_over人工接管这是个很实用的功能。当遇到需要人脸识别、验证码、支付密码等场景时AI 会主动暂停并提示你接管。处理完后它会继续执行后续任务。踩坑指南常见问题速查在实际使用中我遇到过这些问题这里分享一下解决方案。问题 1ADB 找不到设备症状运行adb devices显示空白或no devices解决方案# 重启 ADB 服务adb kill-server adb start-server adb devices如果还不行检查 USB 线是否插好建议用原装数据线换个 USB 接口试试手机上重新授权 USB 调试Windows 用户可能需要安装手机驱动问题 2能打开 App但点不了任何东西症状AI 能启动应用但后续的点击、滑动都没反应原因99% 是因为没开启USB 调试安全设置解决方案进入手机开发者选项找到USB 调试安全设置“或USB 安装”打开这个开关重新连接手机问题 3无法输入中文症状AI 能点击搜索框但输入不了文字解决方案确认已安装 ADB Keyboard在手机设置 → 语言和输入法中启用 ADB Keyboard不需要设置为默认输入法系统会自动切换问题 4截图显示黑屏症状某些页面截图是黑色的说明这是正常现象。银行类、支付类 App 出于安全考虑会禁止截图。系统会自动跳过这些页面或请求人工接管。问题 5Windows 下中文乱码症状命令行输出一堆乱码解决方案# 在命令前加上编码设置setPYTHONIOENCODINGutf-8python main.py...或者在 PowerShell 中$env:PYTHONIOENCODINGutf-8python main.py...问题 6模型响应很慢可能原因云端 API网络延迟或配额用完本地部署显存不足或 CPU 瓶颈优化建议云端 API检查网络考虑升级套餐本地部署关闭其他占用显存的程序降低max-model-len参数问题 7任务执行到一半卡住常见场景页面加载太慢遇到弹窗广告网络请求超时解决方案增加Wait操作的等待时间手动关闭弹窗后让 AI 继续检查手机网络连接使用技巧让 AI 更听话经过一段时间的使用我总结了一些让 AI 执行得更准确的技巧。指令要具体明确不好的指令“帮我买东西”好的指令“打开淘宝搜索无线蓝牙耳机价格 200-500 元”不好的指令“看看微信”好的指令“打开微信查看最近 3 条未读消息”复杂任务拆分成步骤对于多步骤任务可以分开执行# 第一步python main.py打开网易云音乐搜索纯音乐# 等 AI 执行完再执行第二步python main.py选择第一个歌单播放第三首歌善用交互模式对于需要多次调整的任务用交互模式更方便python main.py --base-url http://localhost:8000/v1 --modelautoglm-phone-9b然后可以连续输入 打开小红书 搜索深圳美食 点赞第一条笔记 返回首页涉及隐私的操作要谨慎不建议让 AI 处理支付密码输入银行卡信息身份证号等敏感信息遇到这些场景使用Take_over功能人工接管更安全。进阶玩法一些有趣的应用场景场景 1自动化测试如果你是 App 开发者可以用这个工具做自动化测试test_cases[打开应用点击登录按钮,输入测试账号点击确认,进入首页滑动到底部,点击设置退出登录]forcaseintest_cases:resultagent.run(case)print(f测试用例{case}- 结果{result})场景 2定时任务结合 cronLinux/Mac或任务计划程序Windows实现定时操作# 每天早上 8 点打开新闻 App08* * *cd/path/to/Open-AutoGLMpython main.py打开今日头条浏览科技频道场景 3批量操作需要在多个平台发布相同内容时platforms[微博,小红书,知乎]content今天天气真好forplatforminplatforms:agent.run(f打开{platform}发布动态{content})场景 4数据采集自动收集 App 内的信息注意遵守平台规则agent.run(打开大众点评搜索附近的咖啡店截图前 10 个结果)性能与成本云端 API 方案响应速度单次操作约 2-5 秒成本按 token 计费一般任务约 0.1-0.5 元/次适合场景偶尔使用、快速体验本地部署方案响应速度单次操作约 1-3 秒取决于硬件成本电费显卡功耗约 300-400W适合场景频繁使用、对隐私敏感硬件要求参考最低配置RTX 309024GB 显存推荐配置RTX 4090 或 A100内存32GB存储至少 50GB 空闲空间总结Open-AutoGLM 把AI 操作手机这件事变得触手可及。虽然还有一些局限性比如复杂的支付流程、需要人脸识别的场景但在日常的搜索、浏览、简单操作上已经相当实用了。如果你是开发者可以把它集成到自己的自动化工作流中如果你只是想体验 AI 的能力用云端 API 跑几个任务也很有意思。最后提醒一下使用这类工具时要注意隐私安全不要让 AI 处理敏感信息也要遵守各平台的使用规则。