梯度下降算法是什么呢?下面就讓我們來看看吧。
最速下降法又稱為梯度法,它是解析法中最古老的一種,其他解析方法或是它的變形,或是受它的啟發(fā)而得到的,因此它是最優(yōu)化方法的基礎。作為一種基本的算法,他在最優(yōu)化方法中占有重要地位。其優(yōu)點是工作量少,存儲變量較少,初始點要求不高;缺點是收斂慢,效率不高,有時達不到最優(yōu)解。非線性規(guī)劃研究的對象是非線性函數(shù)的數(shù)值最優(yōu)化問題。它的理論和方法滲透到許多方面,特別是在軍事、經(jīng)濟、管理、生產(chǎn)過程化自動、工程設計和產(chǎn)品優(yōu)化設計等方面都有著重要的應用。而最速下降法正是n元函數(shù)的無約束非線性規(guī)劃問的一種重要解析法,研究最速下降法原理及其算法實現(xiàn)對我們有著極其重要的意義。
以上就是小編整理出來有關梯度下降算法的信息,希望能幫助到你們。
聲明:本網(wǎng)頁內容旨在傳播知識,若有侵權等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。TEL:0731-84117792 E-MAIL:11247931@qq.com