AskaEth
a67b95cbc4
- IoT Provider: 重写Execute()支持多设备命令批量执行，修复persona路径 - Intent Analyzer: 新增isStrongIoTCommand快速通道，跳过LLM分析节省2-3s - Orchestrator: parseReviewMessages()内联审查 + 快速通道扩展(chat/greeting跳过子会话) - Gateway: SSE review_messages解析→WebSocket结构化消息转发(action/chat) - Persona: 对话风格注入action格式指令(括号包裹动作描述) - Frontend: sessionStore历史消息msgType映射 - 新增E2E测试脚本 + 调试标准文档 + 第4轮修复报告 E2E验证: IoT设备操控✅ Review消息拆分✅ 快速通道✅ 响应时间~3.4s Co-Authored-By: Claude Opus 4.7 <noreply@anthropic.com>
105 lines
4.8 KiB
Go
105 lines
4.8 KiB
Go
package ws
|
|
|
|
// MessageAttachment 消息附件 (图片等)
|
|
type MessageAttachment struct {
|
|
Type string `json:"type"` // image
|
|
URL string `json:"url"` // 图片 URL 或 data URL
|
|
ThumbnailURL string `json:"thumbnail_url,omitempty"`
|
|
Filename string `json:"filename,omitempty"`
|
|
Width int `json:"width,omitempty"`
|
|
Height int `json:"height,omitempty"`
|
|
Size int64 `json:"size,omitempty"` // 文件大小 bytes
|
|
Description string `json:"description,omitempty"` // AI 对图片的描述
|
|
}
|
|
|
|
// 客户端 → 服务端消息
|
|
type ClientMessage struct {
|
|
Type string `json:"type"` // message | voice_input | ping | history
|
|
SessionID string `json:"session_id"`
|
|
Mode string `json:"mode"` // text | voice_msg | voice_assistant
|
|
Content string `json:"content"`
|
|
AudioData string `json:"audio_data,omitempty"` // base64
|
|
Attachments []MessageAttachment `json:"attachments,omitempty"` // 图片等附件
|
|
Timestamp int64 `json:"timestamp"`
|
|
}
|
|
|
|
// ReviewMessage 审查后的结构化消息（动作/聊天分离）
|
|
type ReviewMessage struct {
|
|
Type string `json:"type"` // "action" | "chat"
|
|
Content string `json:"content"`
|
|
}
|
|
|
|
// 服务端 → 客户端消息
|
|
type ServerMessage struct {
|
|
Type string `json:"type"` // response | segment | audio | error | device_update | pong | history_response | stream_chunk | stream_end | background_thinking | notification | multi_message | stream_segments | review
|
|
MessageID string `json:"message_id"`
|
|
Text string `json:"text,omitempty"`
|
|
Content string `json:"content,omitempty"` // stream_chunk 的增量文本
|
|
Role string `json:"role,omitempty"` // stream 消息的角色
|
|
SessionID string `json:"session_id,omitempty"` // 会话 ID
|
|
Segments []VoiceSegment `json:"segments,omitempty"` // 断句数组
|
|
FullAudioURL string `json:"full_audio_url,omitempty"`
|
|
ResponseMode string `json:"response_mode"`
|
|
ToolCalls []ToolCall `json:"tool_calls,omitempty"`
|
|
Error string `json:"error,omitempty"`
|
|
Timestamp int64 `json:"timestamp"`
|
|
Messages []Message `json:"messages,omitempty"` // 历史消息列表
|
|
Devices []IotDeviceInfo `json:"devices,omitempty"` // IoT 设备状态
|
|
ThinkingStatus string `json:"thinking_status,omitempty"` // 后台思考状态
|
|
Notification *NotificationInfo `json:"notification,omitempty"` // 通知推送
|
|
MultiMessage *MultiMessagePayload `json:"multi_message,omitempty"` // 多条消息批量发送
|
|
ReviewMessages []ReviewMessage `json:"review_messages,omitempty"` // 审查后的结构化消息列表
|
|
MsgType string `json:"msg_type,omitempty"` // 消息展示类型: action | chat
|
|
}
|
|
|
|
// MultiMessagePayload 多条消息的容器 (对应昔涟的多消息回复风格)
|
|
type MultiMessagePayload struct {
|
|
Messages []MultiMessageItem `json:"messages"`
|
|
}
|
|
|
|
// MultiMessageItem 多消息中的单条
|
|
type MultiMessageItem struct {
|
|
Index int `json:"index"`
|
|
Content string `json:"content"`
|
|
}
|
|
|
|
// NotificationInfo 通知推送信息
|
|
type NotificationInfo struct {
|
|
ID string `json:"id"`
|
|
Type string `json:"type"` // info | warning | success | thinking | reminder
|
|
Title string `json:"title"`
|
|
Body string `json:"body"`
|
|
Timestamp string `json:"timestamp"`
|
|
Data map[string]interface{} `json:"data,omitempty"`
|
|
}
|
|
|
|
// IotDeviceInfo IoT 设备信息（用于 WebSocket 推送）
|
|
type IotDeviceInfo struct {
|
|
ID string `json:"id"`
|
|
Name string `json:"name"`
|
|
Type string `json:"type"`
|
|
Status string `json:"status"`
|
|
Brightness int `json:"brightness,omitempty"`
|
|
Color string `json:"color,omitempty"`
|
|
Temperature float64 `json:"temperature,omitempty"`
|
|
Mode string `json:"mode,omitempty"`
|
|
Position int `json:"position,omitempty"`
|
|
Value float64 `json:"value,omitempty"`
|
|
Unit string `json:"unit,omitempty"`
|
|
Battery int `json:"battery,omitempty"`
|
|
LastUpdated string `json:"last_updated"`
|
|
}
|
|
|
|
type VoiceSegment struct {
|
|
Index int `json:"index"`
|
|
Text string `json:"text"`
|
|
AudioURL string `json:"audio_url"`
|
|
DurationMs int `json:"duration_ms"`
|
|
}
|
|
|
|
type ToolCall struct {
|
|
Name string `json:"name"`
|
|
Arguments map[string]interface{} `json:"arguments"`
|
|
Result interface{} `json:"result,omitempty"`
|
|
}
|