يعتمد النظام الجديد AV-MSF على دمج معلومات شكل الجسم مع خصائص اهتزازه لاستنتاج الصوت الناتج عند طرقه، إذ تختلف أصوات الأجسام المتشابهة بصريًا بحسب مادتها مثل الزجاج والبلاستيك. ويكفي تسجيل نحو ست نقرات موزعة على سطح الجسم اليومي لإنشاء نموذج صوتي قادر على توليد أصوات ضربات في مواضع لم تُسجَّل فيها نقرات فعلية، مع إمكانية تعديل الصوت ليحاكي مواد مختلفة، أو استخدامه في المتاحف الافتراضية للتفاعل مع قطع رقمية هشة، بينما لا يزال النظام يواجه تحديات مع المواد المشوهة بشدة أو الأسطح العاكسة وشبه الشفافة.
