講座題目:自步學(xué)習(xí)的一些進(jìn)展
講座人:孟德宇 教授
講座時(shí)間:16:30
講座日期:2016-10-25
地點(diǎn):長(zhǎng)安校區(qū) 文津樓三段5層522學(xué)術(shù)研討室
主辦單位:計(jì)算機(jī)科學(xué)學(xué)院 智能視覺計(jì)算團(tuán)隊(duì)
講座內(nèi)容:從海量“大”規(guī)模的“無監(jiān)督”“臟”數(shù)據(jù)中,嘗試構(gòu)造有效的機(jī)器學(xué)習(xí)方法來自動(dòng)對(duì)其有效信息進(jìn)行挖掘,已成為領(lǐng)域的熱點(diǎn),也是時(shí)代的亟需,針對(duì)這一問題,自步學(xué)習(xí)(Self-pacedLearning),或可稱為課程學(xué)習(xí)(CurriculumLearning),可能提供了一套行之有效,具有理論內(nèi)涵的新穎解決思路。
自步學(xué)習(xí)的要義是:我們可以模擬人的認(rèn)知機(jī)理,先學(xué)習(xí)簡(jiǎn)單的、普適的知識(shí)(課程),然后逐漸增加難度,過渡到學(xué)習(xí)更復(fù)雜、更專門的知識(shí),以此完成對(duì)復(fù)雜對(duì)象的認(rèn)知。人們受教育的“課程”正是按照這樣的規(guī)律來幫助獲取知識(shí)與能力的。模擬這一過程,我們可以將學(xué)習(xí)對(duì)象(數(shù)據(jù)、特征、概念等)按其對(duì)學(xué)習(xí)目標(biāo)的難易程度,從易到難開展學(xué)習(xí),以這種方式讓機(jī)器完成復(fù)雜的學(xué)習(xí)與推理任務(wù)。Bengio教授預(yù)測(cè)該種學(xué)習(xí)方式將幫助機(jī)器學(xué)習(xí)吸取人類學(xué)習(xí)的優(yōu)點(diǎn),提升包括深度學(xué)習(xí)等機(jī)器學(xué)習(xí)策略的學(xué)習(xí)效果,協(xié)助其跳出局部極優(yōu),獲得更好推廣性。
由卡內(nèi)基梅隆大學(xué),西安交通大學(xué),中國(guó)科學(xué)院計(jì)算所等機(jī)構(gòu)研究人員系統(tǒng)研究了自步學(xué)習(xí)的內(nèi)在機(jī)理,提出了自步學(xué)習(xí)的公理化構(gòu)造條件,并說明:根據(jù)不同應(yīng)用目標(biāo),可由該公理化準(zhǔn)則延伸出各種實(shí)用的課程學(xué)習(xí)方案。
我們的報(bào)告將對(duì)該領(lǐng)域一些前沿進(jìn)展進(jìn)行綜合介紹。