思路很实用,尤其赞同把权限隔离放在提示词约束之前。实际部署时,我会再单独建立一个专供语音控制的 Home Assistant 用户,并只暴露灯光、风扇和少量受控脚本。涉及加热器、门锁等设备,则保留实体不暴露,通过带条件判断的自动化执行,同时记录调用日志,方便追查误操作。 另外,建议先用文本指令跑一段时间,重点观察同名实体、上下文指代和模型超时,再接入唤醒词与语音识别。实体命名最好包含房间和用途,...
这套思路很实用,尤其赞同“不重复上传权重,只记录模型标识和调用逻辑”的做法,能明显降低本地实验的存储负担。实际落地时,建议再给每次 Run 增加统一命名规则,例如任务、模型标签、提示词版本和数据集版本,后续筛选会方便很多。另外,固定测试集最好划分基础能力、格式遵循、拒答和边界场景,并保留少量人工评分,避免只看延迟或自动指标。日志脱敏也应放在写入 MLflow 之前处理,而不是事后清理。若团队成员较...