1. 概述
本次测评为在阿里云ECS上,体验OS Copilot——一款基于大模型构建的操作系统智能助手。它集自然语言问答、命令辅助执行及系统运维调优于一体,专为Linux用户、运维人员和开发人员设计。让知识获取、问题解答、运维操作及编程辅助变得前所未有的便捷与高效。本次测评旨在通过从部署到功能深度体验的全方位流程,深入感受OS Copilot作为阿里云操作系统智能助手的用户体验,并细致发掘产品中可能存在的改进空间。
2. OS Copilot 产品体验评测
1)您的角色是什么?开发、运维、学生?如果使用OS Copilot,您的使用场景是什么?
我的角色是产品工程师,如果使用OS Copilot,我会全场景的使用,包括智能问答、代码输出及代码解析。
2)你觉得 OS Copilot 在新人上手方面是否简单、指引文档是否清晰、是否存在什么阻碍?
OS Copilot新手上手上相对简单,文档清晰,但仍需有一定linux经验。首次点击ESC管理会出现报错,影响部署体验。
3)OS Copilot 是否对您的工作有帮助?如果有帮助的话,帮助程度1-10分,能够打几分?
OS Copilot在指令查找,参数调整,代码生成,代码解析上帮助效果明显,但是在智能回答上有些问题回答的不够准确,整个产品我给打8分。
4)您愿意向周边朋友/工作伙伴推荐OS Copilot吗?如果OS Copilot开源,是否有意愿共同参与开发?包括参与OS领域大模型的训练等。
很乐意想周边朋友/工作伙伴推荐OS Copilot,以简化工作,提升效率。如果OS Copilot开源,愿意共同参与开发,以使其功能,性能,易用性上都有一定提升。
3.OS Copilot 产品功能反馈
1)您体验了哪些功能?对OS Copilot的哪些功能最感兴趣(知识问答、辅助编程、辅助命令执行等),为什么?
我体验了所有的功能,包括知识问答、辅助编程、辅助命令执行等。我对知识问答比较感兴趣,因为可以提升运维效率,基础LINUX的知识点可以给出快速的解答。
2)您有体验过其他类型的产品吗?对比其他产品OS Copilot有什么优缺点?
体验过一些标准的AIGC产品,如ChatGPT、文心一言、紫东太初等。OS Copilot相较于其他产品场景特点突出,专业性更强,流程清晰。
缺点发现了四点:
第一点:知识问答部分问题回答不够准确,如今天的日期是多少?始终无法准确给出答案。
第二点:知识问答会关联之前的提问,但是之前提问与本次提问关联性又不大。
第三点:Codesum状态下无命令补全功能。
第四点:CODESUM模式下代码解析输出为英文,没有CHAT与CODEGEN模式支持中文的友好。
3)您希望OS Copilot能够扩展其他哪些功能呢?比如,支持更多的操作系统、自动命令报错原因分析、系统错误排查,或其他任何您想到的功能。
我希望OS Copilot在做好自身产品的功能,性能、易用性的同时做好生态建设,完成对其他操作系统的支持。
4)OS Copilot与其他产品联动组合的体验以及可能,如ACK智能助手、ECS、Workbench等,您也可以展开列举组合的实际应用场景。
OS Copilot是否可以与Ansible融合,根据用户请求、系统资源、任务优先级等因素来制定最优的执行计划,并将计划分解为Ansible可以执行的子任务。