دوره یادگیری عمیق | 012 | کاهش نرخ یادگیری حین آموزش

یکی از راهکار های آموزش پایدار تر مدل کاهش تدریجی نرخ یادگیری حین آموزش هست Learning rate decay در این جلسه این موضوع رو با هم بررسی میکنیم و میگیم چطوری میکنه به بهتر شدن آموزش کمک بکنه میتونید تلگرام و اینستاگرام رو هم دنبال کنید و با من در ارتباط باشید https://t.me/aiotronics   / aiotronics   بخش بندی ویدیو: 00:00 مقدمه و معرفی مباحث این جلسه 00:27 تاثیر کاهش نرخ یادگیری حین آموزش برای رسیدن به نقطه بهینه 03:22 میشه از اول آموزش نرخ یادگیری رو کوچک انتخاب کنیم؟ | small LR for learning 04:25 کاهش پله ای نرخ یادگیری در پایتورچ | stepLR in pytorch 07:25 کاهش چند پله ای نرخ یادگیری در پایتورچ | MultistepLR in pytorch 08:22 کاهش نمایی نرخ یادگیری در پایتورچ | ExponentialLR in pytorch 10:13 کاهش نرخ یادگیری با منطق مورد نظر خودتون | LambdaLR 10:39 پیچیدگی یافتن نقطه بهینه در توابع با پارامتر های زیاد #هوش_مصنوعی #یادگیری_عمیق #یادگیری_ماشین #شبکه_عصبی #پروژه_هوش_مصنوعی #دوره_رایگان #نرخ_یادگیری #کاهش_نرخ_یادگیری #دیپ_لرنینگ #پایتورچ #گرادیان #LR #Learningratedecay #gradientdescent #learningrate #deeplearning #pytorch #neuralnetworks #pytorch