0% Complete
فارسی
Home
/
سی و دومین کنفرانس ملی و دهمین کنفرانس بین المللی مهندسی زیست پزشکی ایران
DDQN-Learning of Hill-Type Musculoskeletal Arm Model for Elbow Motor Control
Authors :
Mohammad-Reza Sayyed Noorani
1
Abbas Jafarpour Mahalleh
2
Kimiya Khojand
3
1- University of Tabriz
2- University of Tabriz
3- University of Tabriz
Keywords :
Double Deep Q-learning،Elbow Flexion Control،Hill-Type Musculoskeletal Model،Muscle Activation،OpenSim
Abstract :
This study aimed to develop a model-based reinforcement learning (RL) framework designed to partially emulate central nervous system (CNS) learning processes for goal-directed motor control. The RL model, implemented using a double deep Q-learning (DDQN) algorithm, interacting with a biomechanical arm model served as the simulated environment. The environment comprised a Hill-type musculoskeletal representation of the biceps brachii and triceps brachii muscles, enabling elbow flexion–extension over a range of 10–135°. Within this setup, the RL agent received state information, including elbow joint angle and velocity, from the environment and generated muscle activation signals as control outputs. These signals acted on the Hill-based biomechanical model, allowing the agent to learn reaching toward specified target through iterative episodes. To validate biomechanical realism, forward dynamics simulations were performed in OpenSim using a customized arm model driven by the RL-generated excitations. Results demonstrated that the agent successfully acquired stable and biologically plausible motor strategies.
Papers List
List of archived papers
Microfluidic Generation of Core-Shell Breast Tumor Spheroids for Evaluating Dose-Dependent Responses to Quercetin
Fatemeh Zarei - Mohammad Hashem Molayemat - Amir Shamloo - Mohammad Mehdi Sadeghian
شناسایی عوامل تعیین کننده قصد انطباق مالیات با تاکید بر نظریه رفتار برنامه ریزی شده
نیما صدری نوبر زاد - پریسا صدری نوبر زاد
افشای عملکرد پایدار ی و مشاغل خانوادگی
رعنا شهدآور - الناز نجفی - مهری علیپور اصل
Engineering pH-Responsive Hybrid Hydrogels via Inverse Suspension Polymerization for Novel Drug Delivery Systems
Borhan Oghbaei Bonab - Mohammad Ashraf - Sahar Enayati - Alireza Mahjub
کاربرد هوش مصنوعی در صنعت
بهزاد بالازاده - دکتر حسین بوداقی - مرتضی محمود زاده
Finite Element Analysis of Mechanical Stability in Hip Joint Implants: A Comparative Study of Ti-6Al-4V and Ti-13Nb-13Zr Alloys
Mohammad Amin Parsaei Tashi - Mohammad Hagh Panahi
چالشهای اخلاقی هوش مصنوعی در حسابداری مدیریت
محمدرضا پورعلی لاکلایه - مصطفی لطفی
بررسی تأثیر سبک نگارش بر نحوه بازیابی پاسخ توسط مدلهایزبانیبزرگ با استفاده از ژئومتریک
مینا زالی - مریم شفائی - فاطمه فاقعی شهربابکی
مطالعه کامپوزیتهای سرامیکی هیدروکسیآپاتیت جهت استفاده در کاشتنیهای استخوانی
میلاد بدر - مهدیه سلطانعلیپور - جعفر خلیلعلافی
مطالعه ای بر بهبود مدیریت ارتباط با مشتری با استفاده از هوش مصنوعی
اسماعیل محبی کندسری
more
Samin Hamayesh - Version 42.5.2