عنوان مقاله :
استفاده از همواركننده ي L1/2 در يادگيري گرادياني شبكههاي عصبي خود سازمانده
پديد آورندگان :
مهرآوران، زهرا دانشگاه آزاد اسلامي واحد مشهد - گروه مهندسي كامپيوتر , سيد مهدوي، جواد دانشگاه آزاد اسلامي واحد مشهد - گروه مهندسي برق , فرقاني، يحيي دانشگاه آزاد اسلامي واحد مشهد - گروه مهندسي كامپيوتر
كليدواژه :
الگوريتم Batch gradient , تابع همواركننده , رگولاريزيشن L1/2 , شبكهي عصبي خودسازمانده
چكيده فارسي :
يكي از مهمترين معيار ها در آموزش شبكه هاي عصبي، سرعت همگرايي است. تحقق اين معيار وابسته به آموزش مطلوب پارامترها و تعيين اندازهي مناسب براي شبكه است اما مقالاتي كه تاكنون بكار رفته اند بر روي يكي از اين عوامل تمركز داشته اند. به منظور تعيين اندازهي مطلوب يك شبكه با توجه به پيچيدگي مساله از شبكه هاي عصبي خودسازمانده استفاده ميكنيم. چالشي كه در اين شبكه ها ديده مي شود سرعت همگرايي نسبتاً پايين آنها است، درنتيجه براي بهبود سرعت همگرايي آموزش شبكه از الگوريتم Batchgradient(Bg) به همراه رگولاريزيشن L1/2 كه توسط يك تابع همواركننده، هموار شده است، استفاده مي نماييم تا بدين ترتيب دركنار دو فرايند افزايشي و كاهشي اندازه شبكه، پارامترها به خوبي آموزش ببينند و سرعت همگرايي بهبود يابد. نتايج حاصل از پيادهسازي و مقايسه ي روش حاضر با روشهاي پايه، از نظر معيارهاي سرعت همگرايي و صحت كلاسبندي داده هاي تست، نشان از برتري روش پيشنهادي در بهبود صحت و بهبود سرعت همگرايي را مي دهد.
عنوان نشريه :
فناوري اطلاعات در طراحي مهندسي