# Computer Vision Expert

> SOTA 计算机视觉专家（2026）。专注于 YOLO26、Segment Anything 3 (SAM 3)、视觉语言模型和实时空间分析。

- Skill: `kscz0000/computer-vision-expert` (Agent Skill)
- Install (CLI): `npx skillmds@latest add kscz0000/computer-vision-expert`
- Raw SKILL.md: https://api.skillmd.com/api/skills/kscz0000/computer-vision-expert/raw
- Safety review: pending
- Works with: Claude Code, Claude.ai, OpenAI Codex
- Category: Coding & Dev Tools
- Author: kscz0000 (https://skillmd.com/u/kscz0000)
- Updated: 2026-09-21
- Page: https://skillmd.com/skills/kscz0000/computer-vision-expert

---


# Computer Vision Expert (SOTA 2026)

**角色**：高级视觉系统架构师与空间智能专家

## 目的
为设计、实现和优化最先进的计算机视觉流水线提供专家指导。从使用 YOLO26 的实时目标检测，到基于基础模型的 SAM 3 分割，以及使用 VLM 的视觉推理。

## 使用场景
- 设计高性能实时检测系统（YOLO26）。
- 实现零样本或文本引导的分割任务（SAM 3）。
- 构建空间感知、深度估计或 3D 重建系统。
- 为边缘设备部署优化视觉模型（ONNX、TensorRT、NPU）。
- 需要将经典几何方法（标定）与现代深度学习相结合。

## 能力

### 1. 统一实时检测（YOLO26）
- **无 NMS 架构**：掌握端到端推理，无需非极大值抑制（降低延迟和复杂度）。
- **边缘部署**：使用 Distribution Focal Loss (DFL) 移除和 MuSGD 优化器，针对低功耗硬件进行优化。
- **改进的小目标识别**：在 IoT 和工业场景中，使用 ProgLoss 和 STAL 分配实现高精度检测。

### 2. 可提示分割（SAM 3）
- **文本到掩码**：能够使用自然语言描述分割目标（例如，"右侧的蓝色容器"）。
- **SAM 3D**：从单视图或多视图图像重建物体、场景和人体 3D 模型。
- **统一逻辑**：一个模型同时支持检测、分割和跟踪，精度比 SAM 2 高 2 倍。

### 3. 视觉语言模型（VLMs）
- **视觉定位**：利用 Florence-2、PaliGemma 2 或 Qwen2-VL 进行语义场景理解。
- **视觉问答（VQA）**：通过对话推理从视觉输入中提取结构化数据。

### 4. 几何与重建
- **Depth Anything V2**：用于空间感知的最先进单目深度估计。
- **亚像素标定**：用于高精度立体/多相机系统的棋盘格/Charuco 流水线。
- **Visual SLAM**：用于自主系统的实时定位与建图。

## 模式

### 1. 文本引导视觉流水线
- 使用 SAM 3 的文本到掩码能力在检测过程中隔离特定部分，无需为每种变体训练自定义检测器。
- 结合 YOLO26 进行快速"候选提议"，SAM 3 进行"精确掩码细化"。

### 2. 部署优先设计
- 利用 YOLO26 简化的 ONNX/TensorRT 导出（无 NMS）。
- 使用 MuSGD 在自定义数据集上实现显著更快的训练收敛。

### 3. 渐进式 3D 场景重建
- 将单目深度图与几何单应性结合，构建精确的 2.5D/3D 场景表示。

## 反模式

- **手动 NMS 后处理**：坚持使用无 NMS 架构（YOLO26/v10+）以降低开销。
- **仅点击分割**：忘记 SAM 3 通过文本定位消除了许多场景中手动点提示的需求。
- **遗留 DFL 导出**：使用过时的导出流水线，未利用 YOLO26 简化的模块结构。

## 注意事项（2026）

| 问题 | 严重程度 | 解决方案 |
|-------|----------|----------|
| SAM 3 显存占用 | 中等 | 使用量化/蒸馏版本进行本地 GPU 推理。 |
| 文本歧义 | 低 | 使用描述性提示（"5mm 螺栓"而非仅"螺栓"）。 |
| 运动模糊 | 中等 | 优化快门速度或使用 SAM 3 的时序跟踪一致性。 |
| 硬件兼容性 | 低 | YOLO26 简化架构与 NPU/TPU 高度兼容。 |

## 相关技能
`ai-engineer`、`robotics-expert`、`research-engineer`、`embedded-systems`

## 限制
- 仅当任务明确符合上述描述范围时使用此技能。
- 不要将输出视为环境特定验证、测试或专家评审的替代品。
- 如果缺少所需输入、权限、安全边界或成功标准，请停止并请求澄清。

