0% Complete
فارسی
Home
/
سی و دومین کنفرانس ملی و دهمین کنفرانس بین المللی مهندسی زیست پزشکی ایران
DDQN-Learning of Hill-Type Musculoskeletal Arm Model for Elbow Motor Control
Authors :
Mohammad-Reza Sayyed Noorani
1
Abbas Jafarpour Mahalleh
2
Kimiya Khojand
3
1- University of Tabriz
2- University of Tabriz
3- University of Tabriz
Keywords :
Double Deep Q-learning،Elbow Flexion Control،Hill-Type Musculoskeletal Model،Muscle Activation،OpenSim
Abstract :
This study aimed to develop a model-based reinforcement learning (RL) framework designed to partially emulate central nervous system (CNS) learning processes for goal-directed motor control. The RL model, implemented using a double deep Q-learning (DDQN) algorithm, interacting with a biomechanical arm model served as the simulated environment. The environment comprised a Hill-type musculoskeletal representation of the biceps brachii and triceps brachii muscles, enabling elbow flexion–extension over a range of 10–135°. Within this setup, the RL agent received state information, including elbow joint angle and velocity, from the environment and generated muscle activation signals as control outputs. These signals acted on the Hill-based biomechanical model, allowing the agent to learn reaching toward specified target through iterative episodes. To validate biomechanical realism, forward dynamics simulations were performed in OpenSim using a customized arm model driven by the RL-generated excitations. Results demonstrated that the agent successfully acquired stable and biologically plausible motor strategies.
Papers List
List of archived papers
Dual-View Data Representation and Contrastive Learning for Robust EEG-Based Person Identification
Mahdi Tabatabaei - Mohammad Bagher Shamsollahi
بررسی چالشهای مربوط به حریم خصوصی دادهها و استفاده از هوش مصنوعی در تجارت بین المللی
رضا فریدیحیائی - حسین بوداقی خواجه نوبر - بهارک یادگار جمشیدی
The Influence of Insertion-Induced Prestress and Viscoelastic Properties in Fixational Stability of Pedicle Screws in UHWMPE block: A Finite Element Study
Ahmad Babazadeh Gh - Mohammadjavad (Matin) Einafshar - Ata Hashemi
نقش بازاریابی رابطه مند و مدیریت ارتباط با مشتری درتقویت وفاداری مشتری باتاثیر هوش مصنوعی
فرزاد توکلی - معصومه خوانچه سپهر
Electrospun Chitosan-Gelatin/ZIF‑8 Nanofibers Scaffolds for Enhanced Wound Healing
Maryam Nosrati hashi - Maryam Tajabadi - Fateme Mirzajani - Alireza Khavandi
تحلیل هوش مصنوعی برای کاربردهای انسانی
حمداله مهرآیین
ارائه مدل E-UNETR2D جهت قطعه بندی عروق کرونر از روی تصاویر سی تی آنژیوگرافی
مصطفی رجب زاده - فواد قادری - حمیدرضا پورعلی اکبر - نصرالله مقدم چرکری
چیستی و چگونگی شناسایی انجمنها در شبکههای اجتماعی
غزاله حاجی آبادی - مجید عبدالرزاق نژاد
مروری بر ارتباط بهره وری نیروی انسانی و سرمایه و سیاست تقسیم سود شرکتها
لیلی روح بخش
بررسی حسابداری مدیریت در اقتصاد دیجیتال
محمدرضا روانشاد
more
Samin Hamayesh - Version 42.5.2