過去一個(gè)月里，我們對近 1400 個(gè)機(jī)器學(xué)習(xí)項(xiàng)目進(jìn)行了排名，并挑選出熱度前 10 的項(xiàng)目。這份清單涵蓋了包括 OpenAI 最新開發(fā)的 RND 算法、Uber 構(gòu)建的第一個(gè)自然語言處理平臺、由 Berkeley 研究人員提出的從視頻內(nèi)容中進(jìn)行學(xué)習(xí)的 Acrobatics 框架、可以與 Amazon的Echo設(shè)備交互的Anatomy 系統(tǒng)等。希望大家可以找到自己感興趣的項(xiàng)目。

▌1：RND

OpenAI 最近開發(fā)了 RND（Random Network Distillation），一種基于預(yù)測的強(qiáng)化學(xué)習(xí)算法，用于鼓勵(lì)強(qiáng)化學(xué)習(xí)代理通過好奇心來探索他們所處環(huán)境。在游戲任務(wù)Montezuma's Revenge上首次超過人類的平均表現(xiàn)。

RND通過衡量預(yù)測狀態(tài)下隨機(jī)神經(jīng)網(wǎng)絡(luò)固定輸出的難度來激勵(lì)代理訪問不熟悉的狀態(tài)。由于在不熟悉的狀態(tài)下，輸出很難預(yù)測，因此獎(jiǎng)勵(lì)被設(shè)置的很高。在這項(xiàng)任務(wù)中，RND能夠定期查找所有 24 個(gè)房間，并在不使用演示或訪問游戲的基本狀態(tài)情況下實(shí)現(xiàn)當(dāng)前最先進(jìn)的表現(xiàn)。此外，它易于實(shí)現(xiàn)且能夠高效擴(kuò)展，能夠用于其他任何的強(qiáng)化學(xué)習(xí)算法。更多詳細(xì)信息，大家可以參見 RND論文，參考并重現(xiàn)論文的結(jié)果。

論文鏈接

https://arxiv.org/abs/1810.12894

項(xiàng)目主頁鏈接：

https://blog.openai.com/reinforcement-learning-with-prediction-based-rewards/?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more

▌2：Anatomy

Anatomy of AI System Geospatial是一個(gè)可以與 Amazon Echo設(shè)備交互的應(yīng)用。通過此應(yīng)用我們能夠?qū)蝹€(gè) AI系統(tǒng)進(jìn)行詳細(xì)的解剖，了解其中資源分配，預(yù)測，網(wǎng)絡(luò)優(yōu)化等模塊之間的關(guān)系。

項(xiàng)目主頁鏈接：

https://anatomyof.ai/?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more

▌3：Acrobatics

Learning Acrobatics by Watching Youtube是 Berkeley研究人員提出的一種可以從視頻中學(xué)習(xí)技能的框架。通過結(jié)合計(jì)算機(jī)視覺和強(qiáng)化學(xué)習(xí)方面的最先進(jìn)技術(shù)，此系統(tǒng)能夠基于視頻剪輯數(shù)據(jù)，模擬角色并從中學(xué)習(xí)各種技能。給定人物正在執(zhí)行某些技能的視頻，如側(cè)空翻或后空翻，該系統(tǒng)能夠?qū)W習(xí)模擬并再現(xiàn)這些技能策略，而無需任何手動(dòng)姿勢注釋。更多詳細(xì)信息可以參見相關(guān)論文及項(xiàng)目主頁。

論文鏈接：

https://xbpeng.github.io/projects/SFV/2018_TOG_SFV.pdf

項(xiàng)目主頁鏈接：

https://bair.berkeley.edu/blog/2018/10/09/sfv/?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more

▌4：Model-based Machine Learning

Model-based Machine Learning是一個(gè)應(yīng)用機(jī)器學(xué)習(xí)來解決現(xiàn)實(shí)世界問題的開源教程，目前該書籍仍在更新階段。

項(xiàng)目主頁鏈接：

http://mbmlbook.com/toc.html?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more

▌5：NLP & Deep Learning

NLP & Deep Learning是由 Uber團(tuán)隊(duì)構(gòu)建的一個(gè)自然語言平臺（NLP），用于在票證文本中查找與地圖數(shù)據(jù)相關(guān)的問題，并在此平臺指定觸發(fā)故障單的特定類型的地圖數(shù)據(jù)，以便相應(yīng)的高精地圖團(tuán)隊(duì)能夠評估問題并確定解決方案。

項(xiàng)目主頁鏈接：

https://eng.uber.com/nlp-deep-learning-uber-maps/

▌6：Neural Network

該項(xiàng)目是基于 Numpy實(shí)現(xiàn)一個(gè)神經(jīng)網(wǎng)絡(luò)的過程?，F(xiàn)在通過使用像 Keras，TensorFlow或 PyTorch這樣的高級框架，我們可以快速構(gòu)建非常復(fù)雜的神經(jīng)網(wǎng)絡(luò)模型。但是，對于神經(jīng)網(wǎng)絡(luò)的基本概念及其內(nèi)部的原理結(jié)構(gòu)，仍然值得我們?nèi)ド钊肓私?。因此這個(gè)項(xiàng)目將嘗試?yán)脭?shù)學(xué)的理論知識，僅使用 NumPy構(gòu)建一個(gè)完全可操作的神經(jīng)網(wǎng)絡(luò)。在項(xiàng)目的最后，還將測試我們所構(gòu)建的模型，用其解決一個(gè)簡單的分類問題，并將其性能與使用 Keras構(gòu)建的神經(jīng)網(wǎng)絡(luò)模型性能進(jìn)行比較，更多信息可以訪問項(xiàng)目的主頁。

項(xiàng)目主頁鏈接：

https://towardsdatascience.com/lets-code-a-neural-network-in-plain-numpy-ae7e74410795

▌7：Curiosity and Procrastination in RL

該是個(gè)項(xiàng)目是 Google Brain、DeepMind團(tuán)隊(duì)和 ETHZ研究人員合共同作的結(jié)成果他旨在探索 curiosity 和 procrastination 策略在強(qiáng)化學(xué)習(xí) (RL) 領(lǐng)域的應(yīng)用。們提出一種新的機(jī)遇情景記憶的模型，它可以提供一種類似于好奇心（curiosity）的RL獎(jiǎng)勵(lì)，，用于智能體來探索環(huán)境。由于智能體不僅要探索新的環(huán)境，而且還要解決原始任務(wù)，因此該模型將所提供的獎(jiǎng)勵(lì)添加到原始的稀疏任務(wù)獎(jiǎng)勵(lì)中。因此，合并后的獎(jiǎng)勵(lì)不再稀疏，這使得標(biāo)準(zhǔn)RL算法可以從中學(xué)習(xí)，而這種基于 curiosity的 RL算法可以擴(kuò)展到其他任務(wù)的數(shù)據(jù)集中。更多信息可以查看 Google AI Blog上的相關(guān)內(nèi)容。

項(xiàng)目主頁鏈接：

https://ai.googleblog.com/2018/10/curiosity-and-procrastination-in.html?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more

▌8：Detecting Faces

Detecting Faces 是基于 Viola Jones算法的一個(gè)人臉檢測開源項(xiàng)目，在 Youtube 上展示了其 demo視頻，里面有豐富的內(nèi)容可供讀者觀看，我們已經(jīng)給大家下載好了，不用翻墻啦~

項(xiàng)目主頁鏈接：

https://www.youtube.com/watch?v=uEJ71VlUmMQ

▌9：Turing Machine Learning Models

該項(xiàng)目旨在將構(gòu)建好的機(jī)器學(xué)習(xí)模型集成到一個(gè) API上，以便在下次需要使用時(shí)能夠輕松調(diào)用并使用它的功能。這對于滿足現(xiàn)實(shí)世界軟件產(chǎn)品的開發(fā)及部署工作來說是至關(guān)重要的。

項(xiàng)目主頁鏈接：

https://www.datacamp.com/community/tutorials/machine-learning-models-api-python?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more

▌10：Language Translator

Language Translator是一個(gè)開源的自然語言翻譯項(xiàng)目，旨在構(gòu)建一個(gè)自然語言翻譯器，通過自主學(xué)習(xí)翻譯規(guī)則，從頭開始進(jìn)行語言翻譯任務(wù)。

項(xiàng)目主頁鏈接：

https://blog.floydhub.com/language-translator/?utm_source=mybridge&utm_medium=blog&utm_campaign=read_more