问题 1:背景处理:转台上的棋盘格去不掉
- 问题
- 前景遮罩把每张彩色图像和一张空背景图比较。但这个数据集里只有 grab 0 的背景图可用(其余 grab 的“背景图”其实和物体图一样),所以每个 grab 都只能用 grab 0 的背景。转台上的棋盘格会随鱼一起转动,在 grab 1–4 中和这张背景对不上,于是被当成前景混进了重建结果。
- 做法
- 保留颜色差异遮罩(逐像素三通道平方差之和,阈值 0.065),并与解码遮罩取交集,只三角化“与背景不同且解码可靠”的像素。
- 再给每个 grab 设一个三维轴对齐包围盒,只保留盒内的点;因为鱼在每个 grab 里朝向不同,盒子按 grab 分别设定。
- 调盒子时,把每次试重建画成按真实 RGB 着色的三维散点图,棋盘格残留一眼就能看出来。
- 为什么这样做
- 数据集是给定的,不能重拍背景;而物体的空间范围很容易框定,按 grab 设包围盒是可靠又低成本的补救。










