VR এবং আরও অনেক কিছুর জন্য হাতের অবস্থান ট্র্যাক করতে রিস্টব্যান্ড ইকো এবং কৃত্রিম বুদ্ধিমত্তা ব্যবহার করে

কর্নেল ইউনিভার্সিটির গবেষকরা একটি রিস্টব্যান্ড ডিভাইস তৈরি করেছেন যা কৃত্রিম বুদ্ধিমত্তা-চালিত অশ্রাব্য শব্দ তরঙ্গ ব্যবহার করে ক্রমাগত হাতের অবস্থান এবং হাত যে বস্তুর সাথে যোগাযোগ করছে তা সনাক্ত করতে পারে।

সম্ভাব্য অ্যাপ্লিকেশন ট্র্যাকিং হাত অবস্থান অন্তর্ভুক্ত ভার্চুয়াল বাস্তবতা (VR) সিস্টেম স্মার্টফোন এবং অন্যান্য ডিভাইস নিয়ন্ত্রণ করতে অঙ্গভঙ্গি, এবং ব্যবহারকারীর কার্যকলাপ সম্পর্কে জানুন, উদাহরণস্বরূপ, একটি রান্নার অ্যাপ ব্যবহারকারীর চপস, পরিমাপ এবং আলোড়ন হিসাবে একটি রেসিপি বর্ণনা করতে পারে; প্রযুক্তিটি একটি বাণিজ্যিক স্মার্টওয়াচে ফিট করার জন্য যথেষ্ট ছোট এবং একটি স্ট্যান্ডার্ড স্মার্টওয়াচ ব্যাটারিতে পুরো দিন স্থায়ী হয়।

EchoWrist সর্বশেষ স্বল্প শক্তি, ফিউচার ইন্টারেক্টিভ ইন্টেলিজেন্ট কম্পিউটার ইন্টারফেস (এসএফ) ল্যাবরেটরি থেকে শরীরের ভঙ্গি ট্র্যাকিং প্রযুক্তি। চেং ঝাং কর্নেল ইউনিভার্সিটির অ্যান এস বোলস স্কুল অফ কম্পিউটেশনাল অ্যান্ড ইনফরমেশন সায়েন্সেস-এর তথ্য বিজ্ঞানের সহকারী অধ্যাপক এবং পরীক্ষাগার পরিচালনা করেন।

“হাত মৌলিকভাবে গুরুত্বপূর্ণ – আপনি যাই করুন না কেন, এটি প্রায় সবসময় হাত জড়িত,” ঝাং বলেন। “এই ডিভাইসটি এমন একটি সমাধান প্রদান করে যা ক্রমাগত আপনার অঙ্গভঙ্গি ট্র্যাক করে, কম খরচে এবং খুবই সঠিক।”

তথ্য বিজ্ঞানের ডক্টরাল ছাত্র চি-জুং লি এবং রুইডং ঝাং গবেষণা উপস্থাপন করবেন, “ইকোরিস্ট: কন্টিনিউয়াস জেসচার ট্র্যাকিং এবং হ্যান্ড-অবজেক্ট ইন্টারঅ্যাকশন রিকগনিশন ইউজিং লো-পাওয়ার অ্যাকটিভ অ্যাকোস্টিক সেন্সিং রিস্টব্যান্ডস”। অ্যাসোসিয়েশন ফর কম্পিউটিং মেশিনারি সিএইচআই কনফারেন্স অন হিউম্যান ফ্যাক্টর ইন কম্পিউটিং সিস্টেম (CHI'24), মে 11-16।

কাজ হল প্রকাশ এ arXiv প্রিপ্রিন্ট সার্ভার।

EchoWrist ব্যবহারকারীদের অঙ্গভঙ্গির মাধ্যমে ডিভাইসগুলি নিয়ন্ত্রণ করতে এবং উপস্থাপনা সম্পাদন করতে দেয়।

“আমরা এক হাতে মিথস্ক্রিয়া করার অনুমতি দিয়ে স্মার্টওয়াচ এবং এমনকি অন্যান্য ডিভাইসগুলির সাথে আমাদের মিথস্ক্রিয়াকে সমৃদ্ধ করতে পারি এবং আমরা আমাদের স্মার্টফোনগুলিকে দূরবর্তীভাবে নিয়ন্ত্রণ করতে পারি,” লি বলেন। “আমি এক হাতের অঙ্গভঙ্গি দিয়ে আমার স্লাইডগুলি নিয়ন্ত্রণ করতে পারি।”

ঝাং রুইডং বলেন, এই প্রথম ল্যাবরেটরিটি তার প্রযুক্তিকে শরীরের বাইরে প্রসারিত করেছে। “EchoWrist শুধুমাত্র হাতই নয়, বস্তু এবং আশেপাশের পরিবেশও ট্র্যাক করতে পারে।”

আপনার হাত এবং যেকোনো হ্যান্ডহেল্ড বস্তু থেকে অশ্রাব্য শব্দ প্রতিফলিত করতে ডিভাইসটি কব্জিব্যান্ডের উপরে এবং নীচে মাউন্ট করা দুটি ছোট স্পিকার ব্যবহার করে। কাছাকাছি দুটি মাইক্রোফোন প্রতিধ্বনি তুলে নেয় এবং এটি মাইক্রোকন্ট্রোলার দ্বারা ব্যাখ্যা করা হয়। এক চতুর্থাংশেরও কম ব্যাটারি ডিভাইসটিকে শক্তি দেয়।

দলটি মস্তিষ্কের নিউরন দ্বারা অনুপ্রাণিত একটি কৃত্রিম বুদ্ধিমত্তা মডেল তৈরি করেছে, যাকে একটি নিউরাল নেটওয়ার্ক বলা হয়, যা ব্যবহারকারীর অঙ্গভঙ্গিগুলিকে তাদের উত্পাদিত প্রতিধ্বনির উপর ভিত্তি করে ব্যাখ্যা করে।ট্রেন নিউরাল নেটওয়ার্কতারা ইকো কনট্যুর এবং ব্যবহারকারীদের বিভিন্ন অঙ্গভঙ্গি করার ভিডিওগুলির তুলনা করেছে এবং শব্দ সংকেতের উপর ভিত্তি করে 20টি হাতের জয়েন্টগুলির অবস্থান পুনর্গঠন করেছে।

12 জন স্বেচ্ছাসেবকের সাহায্যে, গবেষকরা কাপ, চপস্টিকের উপর EchoWrist পরীক্ষা করেছেন পানির বোতল, পাত্র, পাত্র, কেটলি, সেইসাথে ক্রিয়া যেমন পান করা, নাড়াচাড়া করা, খোসা ছাড়ানো, মোচড়ানো, কাটা এবং ঢালা। সামগ্রিকভাবে, ডিভাইসটির সঠিকতা 97.6%। এই বৈশিষ্ট্যটি ব্যবহারকারীদের ইন্টারেক্টিভ রেসিপিগুলি অনুসরণ করতে, শেফের অগ্রগতি ট্র্যাক করতে এবং পরবর্তী পদক্ষেপগুলি পড়তে দেয় যাতে শেফ স্ক্রীনে দাগ দেওয়া এড়াতে পারে।

অপছন্দ আঙুল ট্র্যাকিংEchoWrist, SciFi ল্যাবের আগের ক্যামেরা ব্যবহার করে হ্যান্ড-ট্র্যাকিং প্রযুক্তি অনেক ছোট এবং অনেক কম শক্তি খরচ করে।

“অ্যাকোস্টিক ট্র্যাকিংয়ের একটি গুরুত্বপূর্ণ অতিরিক্ত সুবিধা হল যে এটি ক্যামেরা ট্র্যাকিংয়ের অনুরূপ পারফরম্যান্সের স্তর প্রদান করার সময় ব্যবহারকারীর গোপনীয়তা বাড়ায়,” বলেছেন সহ-লেখক, সিআইএস এবং মাল্টি-কলেজ ডিপার্টমেন্ট অফ ডিজাইন টেকনোলজির তথ্য বিজ্ঞানের অধ্যাপক কর্নেল বোয়ার্স ফ্রাঙ্কোইস গুইমব্রেটিয়ার বলেছেন। . .

এই প্রযুক্তিটি VR অ্যাপ্লিকেশনগুলির জন্য হাতের নড়াচড়া পুনরুত্পাদন করতে ব্যবহার করা যেতে পারে। বিদ্যমান ভিআর এবং অগমেন্টেড রিয়েলিটি সিস্টেমগুলি এই কাজটি সম্পন্ন করতে হেডসেটে মাউন্ট করা ক্যামেরা ব্যবহার করে, তবে এই পদ্ধতিটি প্রচুর শক্তি খরচ করে এবং হেডসেটের সীমিত ক্ষেত্রটি ছেড়ে চলে গেলে হাতগুলি ট্র্যাক করতে পারে না।

“এই প্রযুক্তির সবচেয়ে উত্তেজনাপূর্ণ অ্যাপ্লিকেশনগুলির মধ্যে একটি হল কৃত্রিম বুদ্ধিমত্তাকে দৈনন্দিন ক্রিয়াকলাপে ট্র্যাকিং এবং অঙ্গভঙ্গি ব্যাখ্যা করার মাধ্যমে মানুষের কার্যকলাপ বোঝার অনুমতি দেওয়া,” চেং ঝাং বলেছেন।

যাইহোক, গবেষকরা উল্লেখ করেছেন যে EchoWrist-এর এখনও কাঁটাচামচ এবং চামচের মতো অত্যন্ত অনুরূপ আকৃতির বস্তুর মধ্যে পার্থক্য করতে অসুবিধা হয়েছিল। কিন্তু দলটি বিশ্বাস করে যে প্রযুক্তির উন্নতির সাথে সাথে বস্তুর স্বীকৃতি উন্নত হবে। আরও অপ্টিমাইজেশানের সাথে, তারা বিশ্বাস করে EchoWrist সহজেই বিদ্যমান, অফ-দ্য-শেল্ফ স্মার্টওয়াচগুলিতে একত্রিত হতে পারে।