a国产,中文字幕久久波多野结衣AV,欧美粗大猛烈老熟妇,女人av天堂

當(dāng)前位置:主頁 > 碩博論文 > 信息類博士論文 >

基于值函數(shù)估計偏差修正的強(qiáng)化學(xué)習(xí)方法研究

發(fā)布時間:2024-06-16 08:44
  強(qiáng)化學(xué)習(xí)是求解馬爾科夫決策過程問題的重要方法。強(qiáng)化學(xué)習(xí)的研究已取得了豐富的成果,特別是自深度強(qiáng)化學(xué)習(xí)出現(xiàn)以來,強(qiáng)化學(xué)習(xí)在諸多領(lǐng)域都獲得了相當(dāng)成功的應(yīng)用;谥岛瘮(shù)的強(qiáng)化學(xué)習(xí)是其中的一個重要分支,出現(xiàn)了以深度Q網(wǎng)絡(luò)為代表的一大批經(jīng)典算法。在迭代求解動作值函數(shù)的過程中,都會涉及到最大期望動作值函數(shù)的估計問題,與此相伴的是存在其中的估計偏差問題。這個問題同樣也存在于機(jī)器學(xué)習(xí)的其它領(lǐng)域中。因此,對最大期望值的準(zhǔn)確估計是個非常重要的問題。本文圍繞值函數(shù)估計偏差修正問題展開研究,主要內(nèi)容如下:(1)針對Q類學(xué)習(xí)算法高估、DQ類學(xué)習(xí)算法低估的問題,研究了最大期望值估計偏差產(chǎn)生的原因,并提出了相應(yīng)的偏差修正思路。首先,提出了次序估計量,并對次序估計量的估計偏差進(jìn)行了分析,使得現(xiàn)有的最大期望值估計方法均可視為次序估計量的組合形式。其次,分析了現(xiàn)有估計方法存在高估低估的原因,重點對最大估計量和雙估計量的優(yōu)勢與不足進(jìn)行了分析。最后,得出結(jié)論:單純用某一個次序估計量參與值函數(shù)更新都會帶來不同程度的估計偏差,有控制地隨機(jī)組合多個次序估計量能有效修正估計偏差。本部分內(nèi)容為后續(xù)研究工作提供了直接的理論指導(dǎo)。(2)以...

【文章頁數(shù)】:124 頁

【學(xué)位級別】:博士

【部分圖文】:

圖4-4本文用到的Atari2600游戲界面

圖4-4本文用到的Atari2600游戲界面

4基于集成雙估計的偏差修正強(qiáng)化學(xué)習(xí)51Space_invaders是一類競爭性游戲,獎勵稀疏,環(huán)境狀態(tài)部分可觀測,許多算法在該游戲中都不夠穩(wěn)定,用以檢測算法的穩(wěn)定性。Zaxxon游戲中DDQN的執(zhí)行性能明顯的受到低估的影響[52],能測試算法的執(zhí)行效果。AlienAsterixB....


圖6-1DQ中QA與QB在某個狀態(tài)的估計動作值及其置信區(qū)間Figure6-1EstimatedActionValuesandConfidenceIntervalsofQAandQBinDQ

圖6-1DQ中QA與QB在某個狀態(tài)的估計動作值及其置信區(qū)間Figure6-1EstimatedActionValuesandConfidenceIntervalsofQAandQBinDQ

6基于值函數(shù)探索獎勵的貝葉斯深度強(qiáng)化學(xué)習(xí)81函數(shù)探索問題中,值函數(shù)之間還存在組合運(yùn)算等其它操作的問題。顯然,值函數(shù)探索問題的研究將會復(fù)雜的多,更具挑戰(zhàn)性。(a)QA(b)QB圖6-1DQ中QA與QB在某個狀態(tài)的估計動作值及其置信區(qū)間Figure6-1EstimatedAction....



本文編號:3995169

資料下載
論文發(fā)表

本文鏈接:http://www.wukwdryxk.cn/shoufeilunwen/xxkjbs/3995169.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶a425a***提供,本站僅收錄摘要或目錄,作者需要刪除請E-mail郵箱bigeng88@qq.com
香蕉国产| 加勒比色老久久综合网| 麻豆一二三区av精品传媒| 久久精品人妻一区二区三区av| 亚洲AV无码午夜嘿嘿嘿| 亚洲av日韩av综合| 日日麻批免费40分钟无码| 一色屋精品视频在线观看| 99久久ER热在这里只有精品99| 久久精品久久久久久噜噜| 日日狠狠久久偷偷色综合96蜜桃| 色人妻| 狠狠插狠狠干| 欧美性猛交xxx乱大交3蜜桃| www.xxx日本| 韩国激情三小时未删减片段| 成人h| 欧美a级大片| 九九九九九伊人| 亚洲黄色一级| 国产日韩欧美在线观看| 大象影视| 天堂东京热| 日韩高清在线观看| 亚洲精品乱码久久久久久| 亚洲不卡在线| 亚洲成人精品一区二区| 91蝌蚪91九色| 免费a级视频| 欧美搞逼| 久久久久久久久久久av| 一本久道久久合久久鬼色8| 国产精品久久久久久久久久电影网| 好吊色欧美一区二区三区视频| 国产山东48老熟女嗷嗷叫白浆 | 12一14幻女BBWXXXX在线播放| 久久精品国产一区二区电影深喉| 午夜成人鲁丝片午夜精品| 久久成人麻豆午夜电影| 久久久国产精品亚洲一区| 日韩精品无码一区二区三区四区|