佩戴与定位
让传感器能调到合适的位置,并贴合前臂。

找到位置,保持贴合。
采集肌肉活动的细微变化。
留下可以回看的依据。
02 / Why It Matters
全球 25 岁以上成年人,
一生中发生卒中的风险约为四分之一。

卒中可能影响运动能力,也可能留下肌肉痉挛等长期问题。拿起杯子、握住餐具、张开手掌,这些熟悉的动作可能因此变得困难。
MyoSense 关注卒中后的前臂与手部:能否将评估过程中的肌肉活动记录下来,让不同时间的变化,有可以回看的依据?
康复背景:世界卫生组织《卒中》03 / The System
MyoSense 将可调节的佩戴装置、肌肉活动记录与数据界面放在一起,探索为康复观察提供更多可追溯的信息。
让传感器能调到合适的位置,并贴合前臂。
记录肌机械信号,整理活动片段与相关特征。
让患者了解记录状态,让医护查看对应数据。

04 / The Origin
此前的 SonicWEB,把肌肉的细微振动变成游戏动作。新的问题随之出现:如果要持续观察,怎样让每次记录更稳定、更容易比较?
回看技术前篇 SonicWEB找到位置。
保持贴合。
留下可比较的记录。
05 / Field Observation
在项目实验中,两位医生的评分反复出现差异,提示人工评估会受到评估者判断的影响。这成为探索辅助记录方式的一个动机。
能否把评估过程中的肌肉活动记录下来,
让后续判断多一份可以回看的依据?
研究关注卒中后的前臂与手部活动。医师评定的 MAS 作为参考标签,与对应的信号记录配对,用于探索肌肉信号特征与评分的关系。
MAS 依据被动牵伸时的阻力评定。评分反复出现差异是一项项目观察,未据此推断治疗结果。
06 / A Guided Session
由医护协助完成首次定位与佩戴,在规定的手法操作中采集信号,并记录评分。让身体、传感器和记录对应起来。


07 / The Experiment
实验使用九通道 MMG 采集,记录腕部、四指和拇指牵伸过程中的信号,并结合时间标记与医师评分进行整理。

对应腕部操作的信号记录。
观察手指相关操作中的活动变化。
保留独立操作的时间与评分信息。
九通道代表采集配置;各通道需结合实际位置解释,不将其直接视为九块肌肉的完全独立活动。
08 / Dataset
研究数据的参与者范围
实际保存的声音信息
由活动检测进一步识别
从参与者,到音频,再到活动片段。不同层级分别记录,保留它们之间的关联。
活动片段来自已有记录,不等同于独立参与者或独立实验。当前为小样本研究探索。
09 / Signal Processing
连续的 MMG 记录中,活动片段与基线波动交织在一起。预处理先减少干扰,再通过滑动窗口和双阈值检测,确定每段活动的时间范围。

绿色竖线 / 活动起点
蓝色竖线 / 活动终点
横向虚线 / 判定阈值
沿时间轴计算窗口内的幅值变化。
分别判断活动何时开始、何时结束。
结合峰值、峰谷差与持续时间过滤短促干扰。
各行对应一个采集通道。
降低漂移与带外干扰
Hilbert 包络 → 窗口 MAV
开启阈值 / 关闭阈值
峰值、峰谷差、持续时间
带通滤波与小波去噪后,通过 Hilbert 变换提取幅值包络。使用 db10 小波、6 层分解和软阈值处理,以保留波动结构并降低噪声。
在包络上使用 10 个采样点的窗口,相邻窗口重叠 90%,计算每个窗口的 MAV。采样率为 200 Hz,对应 50 毫秒窗长、5 毫秒步进。
活动量越过开启阈值,进入起点判断。
活动量低于关闭阈值,进入终点判断。
μ 与 σ 分别表示用于阈值计算的均值和标准差。起止检测后,还要检查事件峰值、峰谷差,并要求起点与终点至少相隔 0.1 秒,以减少短促干扰被计为活动的情况。
阈值与窗口用于该研究流程,不能直接视为适用于所有设备与参与者的通用设置。
描述片段的整体幅值水平。
描述平均幅值,也是窗口活动检测使用的指标。
描述波形正负变化。此式展示基本计数定义,实际判定还需考虑噪声阈值。
以功率为权重,描述频谱分布的平均频率。
N 为样本点数,xᵢ 为信号样本,fₖ 与 Pₖ 为频率及其功率。ZC 从保留正负号的波形计算;这些特征用于统计分析,不直接等同于 MAS 等级。
10 / First Model
最初尝试用特征值建立线性回归模型。R² = 0.12 的结果表明,这一模型在当时数据上的表现有限。
手工特征概括了片段的部分信息,却压缩了波形的时间结构。这一结果促使后续探索双分支神经网络,从波形与时频图中学习特征,并转向 MAS 等级分类。
该结果不直接证明复杂模型有效,也不代表临床预测能力。
R² · 线性回归实验记录
这一结果,推动了下一轮模型探索。11 / Dual-Branch Classification
波形保留活动随时间的变化,时频图展开其中的频率信息。两路 CNN 特征对齐后进入 Transformer,以医师评定的 MAS 等级为监督标签,探索肌肉信号与痉挛分级之间的关系。
1D CNN 提取时域特征,2D CNN 提取时频特征。
将两路特征对齐、拼接,交由 Transformer 编码器建模。
最后一个时间步的表示经全连接层与 Softmax 进入分类输出。
时间横向看时间,纵向看频率。颜色越亮,表示对应时间与频率区间的幅值越高;亮色带让频率分布的变化更容易被看见。
显示采用对数幅值与色彩映射。
信号按 1 秒长度整理:不足部分补零,较长部分截断。STFT 使用 50 点窗口、1 点步长;频谱按 20 个区间取平均幅值,再进行对数幅值变换与显示映射。
1D CNN 使用两层卷积池化模块,配合 LeakyReLU、批归一化和最大池化。2D CNN 使用两层卷积池化、ReLU 与批归一化,并输出 256 维特征向量。
时频向量重复扩展到与时域序列一致的 12 个时间步,再拼接输入两层 Transformer 编码器。自注意力与前馈网络共同建模,模块后接层归一化。
取编码器最后一个时间步,经全连接层与 Dropout,再由 Softmax 输出各类别概率,对应 MAS 分类结果。
以医师评定的 MAS 等级作为监督标签,同时学习波形与时频特征。训练中处理类别不均衡,并持续监测验证损失。
将信号整理为 1 秒输入,生成对应时频图;通过数据增强与类别权重,应对不同等级样本数量的差异。
采用 Adam 优化器,初始学习率为 10⁻⁴,以交叉熵衡量预测类别与监督标签之间的差异。
配合自动学习率调整与早停机制,观察训练和验证损失的变化,而非只追求训练集上的拟合。

在筛选后的数据上,对 MAS 0、1、1+、2 进行四分类评估。混淆矩阵呈现每个等级的正确识别与误分类分布。
2,695 / 4,000 个预测样本分类正确
MAS 0 与 MAS 2 的识别相对更好。MAS 1 与 MAS 1+ 之间的双向误分类最突出,是后续需要重点改善的区间。
| MAS | 0 | 1 | 1+ | 2 |
|---|---|---|---|---|
| 0 | 765 | 103 | 79 | 53 |
| 1 | 125 | 620 | 152 | 103 |
| 1+ | 103 | 172 | 585 | 140 |
| 2 | 61 | 98 | 116 | 725 |
这里的样本是信号片段层面的预测记录,并非 4,000 位参与者。结果仅对应筛选后的四分类验证集;按参与者独立划分的验证尚待确认,不能据此推断对新患者的分类表现。
初步评估的总体准确率为 35%,MAS 3 与 MAS 4 的识别表现较弱,高等级样本覆盖不足。
排除 MAS 3 与 MAS 4 后,四分类评估准确率为 58%。此时任务范围已发生变化。
结合临床判断与波形检查,进一步人工筛除异常记录后,2,695 个样本分类正确。
三个阶段的类别范围或数据条件不同,数值不能作为同一固定测试集上的直接性能对比。筛选标准、数据划分和新参与者验证仍需进一步完善。
12 / Design from Research
传感器偏移、贴合不足和佩戴滑动,都会给采集增加不确定性。产品设计从这些具体问题出发。
允许沿前臂寻找合适的采集位置。
让传感器与皮肤保持接触。
减少复杂的固定与反复调整。
13 / Wearability Iteration
不同固定方式,各有代价。比较适配、调节和穿戴过程后,最终选择按位置分组的结构。

结构直接,但难以适应不同尺寸的手臂。

可以包覆前臂,但单个传感器不易精细调节。

提供更多定位方式,穿戴与调整也更复杂。
把调整,集中到需要的位置。
分组定位,让贴合、固定与调节在同一套结构中协调。14 / Grouped Positioning
按照前臂的空间关系组织导向结构,让不同组的传感器沿需要的方向移动,再固定于合适的位置。

图示为项目中的定位与机构设计参考。字母缩写保留为原研究的定位标记。不同手臂尺寸下的适配与重复定位仍需进一步验证。
15 / Sensor Unit
沿导轨找到位置,以弹性锁扣固定;贴肤端保留伸缩余量,接触部件可拆下清洁。四项功能,围绕同一个传感器单元展开。

从定位与固定,到与皮肤接触。

内部弹簧配合导轨,让传感器移动至合适的采集位置并固定。

侧面弹性锁扣限制锁定后的上下位移,保持已调整的位置。

贴肤端可上下伸缩,为局部接触高度的变化留出余量。

接触部件可独立拆卸,便于清洁与日常维护。
16 / From Model to Prototype
通过实物制作,检查穿戴、调节与锁定的操作关系。让屏幕中的机构,进入真实的手部动作。


照片呈现结构与佩戴原型;不据此声称已验证长期舒适度、临床效果或独立居家使用。
18 / Clinician Experience
从患者的记录概览,到一次采集中的波形与活动片段,再到医师评分与模型分级。五个关键页面,串起查看、采集、分析与评估的工作流程。
19 / Design Reflection
MyoSense 将信号采集、佩戴机构与信息界面放进同一个设计问题中:怎样让肌肉活动更容易被记录,也更有依据地被理解。
七位参与者的数据采集、活动片段整理、特征与模型探索,以及可调传感器和佩戴结构的原型制作。
进一步验证跨参与者表现、重复佩戴的一致性与长期使用体验,再推进家庭记录和医护查看流程。
数据规模按参与者、音频记录和算法识别的活动片段分别表述。医师评分作为参考标签,与对应记录配对。
MMT 通常指徒手肌力测试;MAS 需依据被动牵伸阻力评定,不能由肌力得分直接换算。在手法操作后记录 MAS 并作为相应信号的参考标签,可以作为研究流程;需明确操作、时点与配对方式。
Modified Ashworth Scale:评分定义与使用说明
上述研究中的 sEMG 数据不等同于本项目的 MMG 数据。页面中患者端与医护端为界面概念,产品渲染与结构原型分别标注。