Title of article
Dynamic Obstacle Avoidance by Distributed Algorithm based on Reinforcement Learning
Author/Authors
Yaghmaee, F Electrical and Computer Engineering Department - Semnan University, Semnan, Iran , Reza, H Electrical and Computer Engineering Department - Semnan University, Semnan, Iran
Pages
7
From page
198
To page
204
Abstract
In this paper we focus on the application of reinforcement learning to obstacle avoidance in dynamic Environments in wireless sensor networks. A distributed algorithm based on reinforcement learning is developed for sensor networks to guide mobile robot through the dynamic obstacles. The sensor network models the danger of the area under coverage as obstacles, and has the property of adoption of itself against possible changes. The proposed protocol can integrate the reward computation of the sensors with information of the intended place of robot so that it guides the robot step by step through the sensor network by choosing the safest path in dangerous zones. Simulation results show that the mobile robot can get to the target point without colliding with any obstacle after a period of learning.Also we discussed about time propagation between obstacle, goal, and mobile robot information. Experimental results show that our proposed method has the ability of fast adoption in real applications in wireless sensor networks
Farsi abstract
ما در اين مقاله به كاربرد يادگيري تقويتي در راهنمايي ربات متحرك ضمن ممانعت از موانع پويا در شبكه سنسور بيسيم پرداختيم. شبكه سنسور سطح خطر منطقه اي كه تحت پوشش دارد به صورت مانع مدل مي كند و اين قابليت را دارد كه خود را با تغييرات احتمالي وفق دهد. الگوريتم ارائه شده نتايج محاسبات پاداش و خطا در سنسورها را با اطلاعات مكان ربات در حال حركت تلفيق مي نمايد تا بتواند ربات را قدم به قدم در شبكه سنسور ضمن تعيين امن ترين مسير در مناطق خطرناك راهنمايي كند. نتايج شبيه سازي نشان داد پس از دوره يادگيري، ربات بدون گير كردن در خطرات مي تواند به مقصد برسد. ضمنا در خصوص زمان مورد نياز براي انتشار اطلاعات مقصد و موانع و ربات متحرك و شناسايي آنها بحث و بررسي شده است. آزمايشات نشان ميدهد روش پيشنهادي از دقت خوبي در محيط هاي واقعي برخوردار است.
Keywords
Reinforcement Learning , Sensor Network , Dynamic Obstacle Avoidance , Robot Navigation
Journal title
Astroparticle Physics
Serial Year
2015
Record number
2406970
Link To Document