?近日，一位即將碩士畢業(yè)的網(wǎng)友尋求網(wǎng)友的幫助，「主修強(qiáng)化學(xué)習(xí)領(lǐng)域的博士在畢業(yè)后有什么職業(yè)前景？」 

這位網(wǎng)友介紹道，自己正在寫一篇關(guān)于層次化的深度強(qiáng)化學(xué)習(xí)（RL）碩士論文，并表示這是自己在人工智能領(lǐng)域發(fā)現(xiàn)的一個非常有趣和有前途的主題。 然而，強(qiáng)化學(xué)習(xí)領(lǐng)域的就業(yè)機(jī)會并沒有深度學(xué)習(xí)的多，同時它需要更多的研究來用在許多實(shí)際的案例中。 目前，網(wǎng)友表示自己已經(jīng)收到了2所大學(xué)博士學(xué)位的offer，一個是關(guān)于使用深度學(xué)習(xí)技術(shù)的RL領(lǐng)域，另一個也與深度學(xué)習(xí)有關(guān)，比如時間序列和計(jì)算機(jī)視覺。 網(wǎng)友表示自己對深度學(xué)習(xí)的喜歡程度一般，并表示自己在任何關(guān)于深度學(xué)習(xí)類型的問題上不會遇到難題。 此外，他還比較喜歡研究工作，并且更喜歡在私營公司工作，因?yàn)橄肟纯醋约旱墓ぷ魅绾文軌驊?yīng)用到現(xiàn)實(shí)生活中。 

盡管我更喜歡與RL相關(guān)的博士課程，你認(rèn)為哪個課程更符合我的期望？ 

DL和RL

首先，我們先搞清楚深度學(xué)習(xí)和強(qiáng)化學(xué)習(xí)分別是什么？ 深度學(xué)習(xí)是通過大量數(shù)據(jù)來訓(xùn)練計(jì)算以定位模式，然后使用該模式對新信息進(jìn)行預(yù)測。

比如訓(xùn)練深度學(xué)習(xí)算法來識別照片上的貓，可以通過數(shù)據(jù)投喂數(shù)百萬張包含或不包含貓的圖像。 然后，程序?qū)⑼ㄟ^分類和聚類圖像信息來設(shè)置圖案。這些圖案將通知一個預(yù)測模型，該模型可以根據(jù)一組新的圖片進(jìn)行檢查，并根據(jù)使用訓(xùn)練數(shù)據(jù)創(chuàng)建的設(shè)計(jì)來預(yù)測它們是否包含貓。

強(qiáng)化學(xué)習(xí)是一種自主的，自我教學(xué)的系統(tǒng)，基本上是通過反復(fù)試驗(yàn)來學(xué)習(xí)的，更像是人類個體學(xué)習(xí)新事物的過程。 就拿小時候?qū)W習(xí)騎自行車這件事來講，摔倒后，你會慢慢積累發(fā)現(xiàn)有效的方法。 強(qiáng)化學(xué)習(xí)同是如此，它執(zhí)行任務(wù)的目的是優(yōu)化獎勵，換句話說，它是通過學(xué)習(xí)來實(shí)現(xiàn)最佳結(jié)果。 可以說，深度學(xué)習(xí)和強(qiáng)化學(xué)習(xí)是學(xué)習(xí)的兩個系統(tǒng)。 同時，深度學(xué)習(xí)和強(qiáng)化學(xué)習(xí)并非相互排斥，就比如深度強(qiáng)化學(xué)習(xí)就是深度學(xué)習(xí)和強(qiáng)化學(xué)習(xí)結(jié)合的產(chǎn)物。

網(wǎng)友獻(xiàn)策

就這位Reddit網(wǎng)友的迷茫，很多網(wǎng)友也給出了自己的建議。 「讀博士要花的時間挺久的...雖然你沒說你在哪個學(xué)校讀，但怎么都得至少三年。甚至還得更長時間。我當(dāng)年讀博花了七年！還有你不能用現(xiàn)在找工作的行情來推測你讀完博之后的。這幾年越來越多研究生涌入這個領(lǐng)域，這個領(lǐng)域的門檻會越來越低。 五年之后，同樣的一個計(jì)算機(jī)視覺專家就沒那么厲害了，因?yàn)檫@個領(lǐng)域可能已經(jīng)商品化了，然而強(qiáng)化學(xué)習(xí)會在那時有較大的發(fā)展。（你就看看Deepmind這五年有多少突破吧...如果最后這個領(lǐng)域轉(zhuǎn)向工業(yè)化我可一點(diǎn)都不會奇怪。） 另一個問題是，你讀的大學(xué)好不好，你和你的導(dǎo)師處的怎么樣。如果可以的話，一定要選一個好的導(dǎo)師（雖然你可能缺少相關(guān)信息）。一所知名大學(xué)可以讓你在讀博期間取得不一般的成績。所以如果你很關(guān)心你未來的工作前景，那讀一所知名學(xué)校會很關(guān)鍵。 但總的來說，讀博是一段漫長的旅程，肯定會很艱難。所以我是你的話，我會好好挑選一個感興趣的課題，因?yàn)槟阋蔀槟莻€領(lǐng)域的專家的。」 

「拿到博士學(xué)位。然后去一個有研究基礎(chǔ)的職位。」 

「讀哪個領(lǐng)域的博士呢？強(qiáng)化學(xué)習(xí)的嗎？另外，如果有必要的話，轉(zhuǎn)到別的領(lǐng)域容易嗎？」 「如果你的興趣點(diǎn)更寬泛一點(diǎn)，我推薦你讀視覺方面的博士，這樣你能有更豐富的經(jīng)驗(yàn)。」 

「事實(shí)是，我對強(qiáng)化學(xué)習(xí)基本一無所知...我是邊寫我的碩士論文邊對強(qiáng)化學(xué)習(xí)有個更深入的了解。」 「這樣的話...我推薦你讀強(qiáng)化學(xué)習(xí)的博士。因?yàn)楫?dāng)你在一個領(lǐng)域成為專家以后，你再去接觸別的你感興趣的領(lǐng)域你就會更加自信。我當(dāng)時碩博連讀的就是強(qiáng)化學(xué)習(xí)專業(yè)，所以我跟你說的建議也是我自己想要做的。」 

「就找工作來說的話，強(qiáng)化學(xué)習(xí)不是比time series和CV更小眾嗎？」 

「去讀你感興趣的專業(yè)的博士吧。沒有人會為了你博士做的課題為難你。另外，時刻記住，深度學(xué)習(xí)有點(diǎn)被過度宣傳了。這也就是為什么深度學(xué)習(xí)相關(guān)的工作鋪天蓋地...別讓這種潮流阻礙了你真正想去學(xué)的東西。」 

 ?