استفاده از صفحه نمایش‌های لمسی یا دکمه‌های فشاری برای کنترل دستگاه‌ها همیشه عملی نیست و دستورات صوتی ممکن است در محیط‌های پر سر و صدا درست عمل نکنند.  

یک سیستم جدید جایگزین ارائه شده است و به این صورت عمل می‌کند که از امواج صوتی موجود در سراسر سطح اشیاء که در حال حرکت هستند، استفاده می‌کند.

از نظر سخت‌افزاری، دستگاه‌هایی به نام واحد‌های دریافت صدا (VPU) وجود دارد که در هدفون‌های هدایت صوتی استفاده می‌شد.  

هر VPU حاوی یک حسگر صوتی است که در یک محفظه مهر و موم شده قرار دارد و تمام نویز‌های محیط را مسدود می‌کند.  

در نتیجه هنگامی که یک VPU روی سطحی مانند میز قرار می‌گیرد، به راحتی می‌تواند امواج صوتی را که از آن سطح عبور می‌کند، هنگام ضربه زدن، خراشیدن یا کشیدن انگشت خود روی آن دریافت کند.  

صدا‌های بلند در محیط بر توانایی آن در انجام این کار، تا زمانی که منبع آن صدا‌ها در برابر سطح مورد استفاده ارتعاش نداشته باشد، تأثیر منفی نمی‌گذارد.

یک الگوریتم مبتنی بر یادگیری ماشینی روی یک لپ‌تاپ متصل می‌تواند الگو‌های امواج مختلف را تا حرکات انگشتی که آن‌ها را ایجاد کرده است، با دقت ۹۷ درصد مطابقت دهد.  

سپس دستورات کامپیوتری از پیش برنامه ریزی شده‌ای را اجرا می‌کند که با هر حرکت مطابقت دارد.  

همچنین SAWSense می‌تواند فعالیت‌های مختلفی را که بر روی یک سطح انجام می‌شوند، بر اساس امواج صوتی سطح متمایز آن‌ها شناسایی کند.  

به عنوان مثال در تست‌های آزمایشگاهی این فناوری می‌تواند بین کار‌های هم زدن، خرد کردن و پردازش مواد غذایی که روی میز آشپزخانه انجام می‌شود تمایز قائل شود و البته امکانات به همین جا ختم نمی‌شود.  

یاشا ایراوانچی کاندیدای دکترای علوم و مهندسی کامپیوتر گفت: این فناوری شما را قادر می‌سازد که برای مثال، کل سطح بدن شما مانند یک سطح تعاملی رفتار کند.

اگر دستگاه را روی مچ دست خود قرار دهید، می‌توانید ژست‌های حرکتی را روی پوست خود انجام دهید.  
ما یافته‌های اولیه‌ای داریم که نشان می‌دهد این کار کاملا امکان پذیر است.

SAWSense در هفته گذشته مقاله‌ای درباره این سیستم در کنفرانس ۲۰۲۳ در مورد عوامل انسانی در سیستم‌های محاسباتی هامبورگ آلمان ارائه کرده است.

منبع: سایت نیواطلس منتشره از دانشگاه میشیگان