PAPER DEEP DIVE
面向张拉整体机器人6轴接触力估计的可扩展开源视触觉传感器
本文提出一种可扩展的开源视触觉传感器,用于张拉整体机器人的6轴接触力估计,提供低成本高精度力感知方案。
用于张拉整体机器人6轴接触力估计的可扩展开源视觉触觉传感器
论文：Scalable Open-Source Visuotactile Sensor for 6-Axis Contact Wrench Estimation in Tensegrity Robots
作者：Wenzhe Tong, Jonathan Mi, Xili Yi, Nima Fazeli, Xiaonan Huang（密歇根大学机器人系）
链接：arXiv:2607.15633 · 代码
一句话总结
本文提出一种可扩展、开源的视觉触觉传感系统，专为张拉整体机器人设计，通过弹性体壳+TPU接口+嵌入式摄像头的端盖传感器实现六轴力矩估计和接触检测，采用新型陀螺体填充粘合技术无需胶水，神经网络将剪切向量场映射为6维力矩，静态验证 MSE 为 0.1531，并在 12kg 张拉整体机器人上验证了地面接触检测能力。
研究背景与动机
张拉整体机器人由刚性杆和张力索网络组成，具有极高的强度重量比、抗冲击能力和通过形变穿越复杂环境的能力。然而，其高自由度和非线性动力学使状态估计极具挑战性。当前本体感知方法主要依赖索长度测量（电阻/电容应变传感器）或编码器+IMU，外部传感方法（距离传感器、动作捕捉）不适合现场部署。
核心缺口：缺乏可靠的直接地面接触测量。接触感知可以为状态估计器提供显式约束——知道哪个端盖锚定在地面上，可以将浮动基估计问题转化为更受约束的公式。虽然视觉触觉感知在机器人操作中已证明有效，但其在张拉整体机器人上的应用几乎未被探索。
图1：视觉触觉端盖传感器的爆炸视图及其在张拉整体机器人上的集成。
传感器设计
机械设计
传感器直径 $130\,\mathrm{mm}$，以匹配米级张拉整体机器人的端盖尺度。在此尺寸下，没有现成的商业或非商业视觉触觉传感器可用。五个核心组件：弹性体壳、TPU接口、刚性基座、LED灯环和摄像头。
弹性体壳由 Smooth-Sil™ 950（Shore 50A）制成，具有高抗撕裂性和刚度。内表面在铸造时形成浅凹坑，涂上标记点用于变形追踪。TPU接口使用 Bambulabs TPU 95A 耗材打印，提供弹性和结构强度。
图2：端盖制造步骤——PLA模具和TPU接口3D打印、弹性体浇注、脱模、标记点涂覆。
陀螺体填充粘合技术
采用连续填充机械粘合技术连接弹性体壳和TPU接口。铸造时液态硅胶流入3D打印TPU的开放陀螺体填充中，固化后形成机械互锁，无需胶水：
$$ \sigma_{\mathrm{bond}} = \min\left(\sigma_{\mathrm{elastomer}}, \sigma_{\mathrm{TPU}}, \sigma_{\mathrm{interlock}}\right) $$其中 $\sigma_{\mathrm{bond}}$ 为粘合强度，受限于材料固有强度中最弱的一环。使用 $10\%$ 陀螺体填充平衡粘合强度和材料柔性。拉伸测试表明机械粘合比 Sil-Poxy 胶水高约 $25\%$ 的拉伸强度，剥离强度高约 $300\%$。
图3：陀螺体填充截面——3D打印切片软件视图和实际弹性体-TPU粘合样品。
电气设计
LED灯环作为专用PCBA提供均匀照明，通过摄像头5V输出供电，升压转换器（TPS61165）升至 $25\,\mathrm{V}$ 驱动LED阵列，效率约 $86\%$，功耗低于 $130\,\mathrm{mA}$。板载摄像头（OV2710传感器）配 $180°$ 鱼眼镜头最大化可视区域。
接触感知方法
训练一个触觉到力矩的神经网络，将密集的凝胶足向量场映射到6D接触力矩。输入为双通道剪切向量场 $\mathbf{V} \in \mathbb{R}^{2 \times H \times W}$，目标为力矩 $\mathbf{w} = [F_x, F_y, F_z, T_x, T_y, T_z]^\top \in \mathbb{R}^6$：
$$ \mathbf{w} = f_\theta(\mathbf{V}) + \mathbf{w}_{\mathrm{bias}} $$其中 $f_\theta$ 为残差MLP，$\mathbf{w}_{\mathrm{bias}}$ 为偏置项。剪切场由 GelSlim 4.0 的光流方法计算，尺寸为 $(2, 30, 30)$。
图4：端盖摄像头图像及对应的 $18 \times 18$ 剪切场——接触发生在帧下边缘附近。
数据采集使用 KUKA Med R820 工业机器人和 ATI Gamma 6轴力/扭矩传感器。接近方向由倾角 $\theta$ 和扭角 $\phi$ 参数化：
$$ \theta \in \{10°, 20°, 30°, 40°, 50°\}, \quad \phi \in \{0°, 45°, 90°, \ldots, 315°\} $$每个 $(\theta, \phi)$ 方向施加 $[5, 35]\,\mathrm{N}$ 法向力序列，然后在支撑面上画圆覆盖更多摩擦情况。最终数据集包含 $34{,}368$ 个标注样本。
接触检测从预测力矩派生二值指示器。当地面反力超过阈值 $\tau$ 时判定为接触：
$$ c_t = \mathbb{1}\left[\|\mathbf{F}_t\| > \tau\right], \quad \tau = 2\,\mathrm{N} $$
flowchart LR
A["端盖摄像头
640×480 RGB"] --> B["裁剪+下采样
200×200"]
B --> C["光流剪切场估计
GelSlim 4.0"]
C --> D["双通道剪切场 V
2×30×30"]
D --> E["残差MLP f_θ"]
E --> F["6D力矩预测 w
Fx,Fy,Fz,Tx,Ty,Tz"]
F --> G["接触检测
||F|| > τ"]
style E fill:#e1f5fe
style G fill:#e8f5e9
实验结果
静态力矩验证
静态验证集上的 MSE：
$$ \mathrm{MSE} = \frac{1}{N}\sum_{i=1}^{N}\|\mathbf{w}_i - \hat{\mathbf{w}}_i\|^2 = 0.1531 $$训练集 MSE 为 $0.1314$，测试集 $0.1513$，验证集 $0.1531$——验证误差接近训练损失，表明模型未严重过拟合。
图5：传感器数据——摄像头图像和对应的剪切场。
| 数据集 | MSE | 说明 |
|---|---|---|
| 训练集 | 0.1314 | 静态接触训练数据 |
| 测试集 | 0.1513 | 静态接触测试数据 |
| 验证集 | 0.1531 | 静态接触验证数据 |
| 动态(域外) | 2.67 | 圆轨迹动态运动 |
| 测试类型 | 机械粘合 | Sil-Poxy | 提升 |
|---|---|---|---|
| 拉伸强度 | 基线 | 低25% | +25% |
| 剥离强度 | 基线 | 低300% | +300% |
张拉整体机器人测试
将6个视觉触觉端盖集成到 $12.0\,\mathrm{kg}$ 三杆张拉整体机器人上，评估其实时地面反力趋势估计和接触事件检测能力。机器人放置在四种不同配置下，传感器可靠地识别地面接触。
从传感器设计角度，该系统的核心创新在于陀螺体填充（gyroid-infill）机械粘合技术。传统方法使用硅胶胶水（如Sil-Poxy）连接弹性体与TPU接口，但胶水粘合存在界面老化、不一致性和环境退化问题。陀螺体填充技术利用3D打印TPU的开放网格结构，在注模过程中液态硅胶渗入网格空隙，固化后形成物理互锁。这种互锁结构在拉伸测试中比Sil-Poxy高25%强度，在剥离测试中高300%，且变异更低。
传感器直径为130mm，匹配典型米级张拉整体机器人的端盖尺寸。在此尺度下，无现成商业或非商业视觉触觉传感器可用。弹性体壳体采用Smooth-Sil 950（Shore 50A），选择其高抗撕裂性和刚度以支撑大型机器人。较软材料可用于更小机器人以提升触觉分辨率。嵌入式ELP-USBFHD01M摄像头配备OV2710传感器和180度鱼眼镜头，最大化壳体可见面积，特别适合张拉整体机器人非球形几何——地面接触常发生在端盖侧面而非尖端。
LED照明环采用定制PCBA，通过TPS61165升压转换器将USB 5V升至25V驱动LED阵列，效率约86%，功耗低于130mA（远在USB 2.0的2.5W限制内）。电流控制调节至20mA确保稳定亮度。整个电气系统集成在端盖内部，无需外部电源，实现了真正的自包含模块化设计。
数据采集使用KUKA Med R820工业机器人和ATI Gamma 6轴力/力矩传感器。以30Hz采集640×480 RGB帧，中心裁剪并下采样至200×200后进行光流处理。每个试验包含接近、轻接触和卸载阶段，使数据分布以低到中等接触力为主。倾斜角 $ heta$ 从 $10°$ 到 $50°$ 以 $10°$ 步进，扭转角 $\phi$ 每 $45°$ 从 $0°$ 到 $315°$ 采样，覆盖40种接触方向。每个方向施加 $[5, 35]$ N法向力序列后画圆覆盖摩擦情况。
局限性
- 动态性能不足：动态(域外)MSE为 $2.67$，远高于静态的 $0.1531$，主要由于有限摄像头帧率、剪切场估计的处理延迟和当前残差MLP缺乏时间历史。力矩估计在滑动接触中表现出更高的变异性和相位滞后。
- 力矩估计精度受限：力矩预测对剪切场中的小空间误差更敏感，特别是在凝胶边界附近，光学畸变和照明不均匀引入局部偏差。未来版本应采用更高帧率成像、时间戳补偿和时间模型。
总结
本文提出一种可扩展、开源的视觉触觉传感系统，专为张拉整体机器人设计。通过陀螺体填充粘合技术实现了无需胶水的耐用弹性体-TPU接口，神经网络将剪切向量场映射为6维力矩，静态验证MSE为 $0.1531$。在 $12\,\mathrm{kg}$ 张拉整体机器人上的全系统集成验证了传感器可靠识别地面接触的能力，为张拉整体机器人的接触感知本体感受和状态估计提供了低成本、可复现、物理可解释的路径。
金句：「知道哪个端盖锚定在地面上，可以将浮动基估计问题转化为更受约束的公式」——接触感知不仅提供力矩测量，更通过几何约束从根本上简化了张拉整体机器人的状态估计问题。
