自学成才秘籍!机器学习深度学习经典资料汇总
自學成才秘籍!機器學習&深度學習經典資料匯總
《Brief History of Machine Learning》
介紹:這是一篇介紹機器學習歷史的文章,介紹很全面,從感知機、神經網絡、決策樹、SVM、Adaboost到隨機森林、DeepLearning.
《Deep Learning in Neural Networks: An Overview》
介紹:這是瑞士人工智能實驗室Jurgen Schmidhuber寫的最新版本《神經網絡與深度學習綜述》本綜述的特點是以時間排序,從1940年開始講起,到60-80年代,80-90年代,一直講到2000年后及最近幾年的進展。涵蓋了deep learning里各種tricks,引用非常全面.
《A Gentle Introduction to Scikit-Learn: A Python Machine LearningLibrary》
介紹:這是一份python機器學習庫,如果您是一位python工程師而且想深入的學習機器學習.那么這篇文章或許能夠幫助到你.
《How to Layout and Manage Your Machine Learning Project》
介紹:這一篇介紹如果設計和管理屬于你自己的機器學習項目的文章,里面提供了管理模版、數據管理與實踐方法.
《Machine Learning is Fun!》
介紹:如果你還不知道什么是機器學習,或則是剛剛學習感覺到很枯燥乏味。那么推薦一讀。這篇文章已經被翻譯成中文,如果有興趣可以移步http://blog.jobbole.com/67616/
《R語言參考卡片》
介紹:R語言是機器學習的主要語言,有很多的朋友想學習R語言,但是總是忘記一些函數與關鍵字的含義。那么這篇文章或許能夠幫助到你
《Choosing a Machine Learning Classifier》
介紹:我該如何選擇機器學習算法,這篇文章比較直觀的比較了Naive Bayes,Logistic Regression,SVM,決策樹等方法的優劣,另外討論了樣本大小、Feature與Model權衡等問題。此外還有已經翻譯了的版本:http://www.52ml.net/15063.html
《An Introduction to Deep Learning: From Perceptrons to Deep Networks》
介紹:深度學習概述:從感知機到深度網絡,作者對于例子的選擇、理論的介紹都很到位,由淺入深。翻譯版本:http://www.cnblogs.com/xiaowanyer/p/3701944.html
《The LION Way: Machine Learning plus Intelligent Optimization》
介紹:<機器學習與優化>這是一本機器學習的小冊子, 短短300多頁道盡機器學習的方方面面. 圖文并茂, 生動易懂, 沒有一坨坨公式的煩惱. 適合新手入門打基礎, 也適合老手溫故而知新. 比起MLAPP/PRML等大部頭, 也許這本你更需要!具體內容推薦閱讀:http://intelligent-optimization.org/LIONbook/
《深度學習與統計學習理論》
介紹:作者是來自百度,不過他本人已經在2014年4月份申請離職了。但是這篇文章很不錯如果你不知道深度學習與支持向量機/統計學習理論有什么聯系?那么應該立即看看這篇文章.
《計算機科學中的數學》
介紹:這本書是由谷歌公司和MIT共同出品的計算機科學中的數學:Mathematics for Computer Science,Eric Lehmanet al 2013 。分為5大部分:1)證明,歸納。2)結構,數論,圖。3)計數,求和,生成函數。4)概率,隨機行走。5)遞歸。等等
《數據科學入門》
介紹:這是一本由雪城大學新編的第二版《數據科學入門》教材:偏實用型,淺顯易懂,適合想學習R語言的同學選讀。
《Twenty Questions for Donald Knuth》
介紹:這并不是一篇文檔或書籍。這是篇向圖靈獎得主Donald Knuth提問記錄稿: 近日, Charles Leiserson, AlAho, Jon Bentley等大神向Knuth提出了20個問題,內容包括TAOCP,P/NP問題,圖靈機,邏輯,以及為什么大神不用電郵等等。
《Automatic Construction and Natural-Language Description ofNonparametric Regression Models》
介紹:不會統計怎么辦?不知道如何選擇合適的統計模型怎么辦?那這篇文章你的好好讀一讀了麻省理工Joshua B. Tenenbaum和劍橋Zoubin Ghahramani合作,寫了一篇關于automatic statistician的文章。可以自動選擇回歸模型類別,還能自動寫報告…
《ICLR 2014論文集》
介紹:對深度學習和representationlearning最新進展有興趣的同學可以了解一下
《Introduction to Information Retrieval》
介紹:這是一本信息檢索相關的書籍,是由斯坦福Manning與谷歌副總裁Raghavan等合著的Introduction to InformationRetrieval一直是北美最受歡迎的信息檢索教材之一。最近作者增加了該課程的幻燈片和作業。IR相關資源:http://www-nlp.stanford.edu/IR-book/information-retrieval.html
《Machine learning in 10 pictures》
介紹:Deniz Yuret用10張漂亮的圖來解釋機器學習重要概念:1. Bias/Variance Tradeoff2. Overfitting 3. Bayesian / Occam’s razor 4. Feature combination 5. Irrelevantfeature 6. Basis function 7. Discriminative / Generative 8. Loss function 9.Least squares 10. Sparsity.很清晰
《雅虎研究院的數據集匯總》
介紹:雅虎研究院的數據集匯總: 包括語言類數據,圖與社交類數據,評分與分類數據,計算廣告學數據,圖像數據,競賽數據,以及系統類的數據。
《An Introduction to Statistical Learning with Applications in R》
介紹:這是一本斯坦福統計學著名教授Trevor Hastie和Robert Tibshirani的新書,并且在2014年一月已經開課:https://class.stanford.edu/courses/HumanitiesScience/StatLearning/Winter2014/about
BestMachine Learning Resources for Getting Started
介紹:機器學習最佳入門學習資料匯總是專為機器學習初學者推薦的優質學習資源,幫助初學者快速入門。而且這篇文章的介紹已經被翻譯成中文版。如果你不怎么熟悉,那么我建議你先看一看中文的介紹。
Mydeep learning reading list
介紹:主要是順著Bengio的PAMI review的文章找出來的。包括幾本綜述文章,將近100篇論文,各位山頭們的Presentation。全部都可以在google上找到。
Cross-LanguageInformation Retrieval
介紹:這是一本書籍,主要介紹的是跨語言信息檢索方面的知識。理論很多
探索推薦引擎內部的秘密,第 1 部分: 推薦引擎初探
介紹:本文共有三個系列,作者是來自IBM的工程師。它主要介紹了推薦引擎相關算法,并幫助讀者高效的實現這些算法。探索推薦引擎內部的秘密,第 2 部分: 深度推薦引擎相關算法 – 協同過濾,探索推薦引擎內部的秘密,第 3 部分:深度推薦引擎相關算法 – 聚類
《Advice for students of machine learning》
介紹:康奈爾大學信息科學系助理教授David Mimno寫的《對機器學習初學者的一點建議》,寫的挺實際,強調實踐與理論結合,最后還引用了馮 ? 諾依曼的名言:“Young man, in mathematics you don’t understand things. You just get used tothem.”
分布式并行處理的數據
介紹:這是一本關于分布式并行處理的數據《Explorations inParallel Distributed Processing: A Handbook of Models, Programs, and Exercises》,作者是斯坦福的James L. McClelland。著重介紹了各種神級網絡算法的分布式實現,做Distributed Deep Learning 的童鞋可以參考下
《“機器學習”是什么?》
介紹:【“機器學習”是什么?】John Platt是微軟研究院杰出科學家,17年來他一直在機器學習領域耕耘。近年來機器學習變得炙手可熱,Platt和同事們遂決定開設博客,向公眾介紹機器學習的研究進展。機器學習是什么,被應用在哪里?來看Platt的這篇博文
《2014年國際機器學習大會ICML 2014 論文》
介紹:2014年國際機器學習大會(ICML)已經于6月21-26日在國家會議中心隆重舉辦。本次大會由微軟亞洲研究院和清華大學聯手主辦,是這個有著30多年歷史并享譽世界的機器學習領域的盛會首次來到中國,已成功吸引海內外1200多位學者的報名參與。干貨很多,值得深入學習下
《Machine Learning for Industry: A Case Study》
介紹:這篇文章主要是以Learning to Rank為例說明企業界機器學習的具體應用,RankNet對NDCG之類不敏感,加入NDCG因素后變成了LambdaRank,同樣的思想從神經網絡改為應用到Boosted Tree模型就成就了LambdaMART。Chirs Burges,微軟的機器學習大神,Yahoo 2010 Learning to Rank Challenge第一名得主,排序模型方面有RankNet,LambdaRank,LambdaMART,尤其以LambdaMART最為突出,代表論文為: From RankNet toLambdaRank to LambdaMART: An Overview 此外,Burges還有很多有名的代表作,比如:A Tutorial on Support Vector Machines for Pattern Recognition
Some Notes on Applied Mathematics for Machine Learning
100Best GitHub: Deep Learning
介紹:100 Best GitHub: Deep Learning
《UFLDL-斯坦福大學Andrew Ng教授“Deep Learning”教程》
介紹:本教程將闡述無監督特征學習和深度學習的主要觀點。通過學習,你也將實現多個功能學習/深度學習算法,能看到它們為你工作,并學習如何應用/適應這些想法到新問題上。本教程假定機器學習的基本知識(特別是熟悉的監督學習,邏輯回歸,梯度下降的想法),如果你不熟悉這些想法,我們建議你去這里機器學習課程,并先完成第II,III,IV章(到邏輯回歸)。此外這關于這套教程的源代碼在github上面已經有python版本了UFLDL Tutorial Code
*《Deep Learning for Natural Language Processing and RelatedApplications》
介紹:這份文檔來自微軟研究院,精髓很多。如果需要完全理解,需要一定的機器學習基礎。不過有些地方會讓人眼前一亮,毛塞頓開。
UnderstandingConvolutions
介紹:這是一篇介紹圖像卷積運算的文章,講的已經算比較詳細的了
《Machine Learning Summer School》
介紹:每天請一個大牛來講座,主要涉及機器學習,大數據分析,并行計算以及人腦研究。https://www.youtube.com/user/smolix (需翻墻)
《Awesome Machine Learning》
介紹:一個超級完整的機器學習開源庫總結,如果你認為這個碉堡了,那后面這個列表會更讓你驚訝:【Awesome Awesomeness】,國內已經有熱心的朋友進行了翻譯中文介紹,機器學習數據挖掘免費電子書
斯坦福《自然語言處理》課程視頻
介紹:ACL候任主席、斯坦福大學計算機系Chris Manning教授的《自然語言處理》課程所有視頻已經可以在斯坦福公開課網站上觀看了(如Chrome不行,可用IE觀看) 作業與測驗也可以下載。
《Deep Learning and Shallow Learning》
介紹:對比 DeepLearning 和 Shallow Learning 的好文,來著浙大畢業、MIT 讀博的 Chiyuan Zhang 的博客。
《Recommending music on Spotify with deep learning》
介紹:利用卷積神經網絡做音樂推薦。
《Neural Networks and Deep Learning》
介紹:神經網絡的免費在線書,已經寫了三章了,還有對應的開源代碼:https://github.com/mnielsen/neural-networks-and-deep-learning愛好者的福音。
《Java Machine Learning》
介紹:Java機器學習相關平臺和開源的機器學習庫,按照大數據、NLP、計算機視覺和Deep Learning分類進行了整理。看起來挺全的,Java愛好者值得收藏。
《Machine Learning Theory: An Introductory Primer》
介紹:機器學習最基本的入門文章,適合零基礎者
《機器學習常見算法分類匯總》
介紹:機器學習的算法很多。很多時候困惑人們都是,很多算法是一類算法,而有些算法又是從其他算法中延伸出來的。這里,我們從兩個方面來給大家介紹,第一個方面是學習的方式,第二個方面是算法的類似性。
《機器學習經典論文/survey合集》
介紹:看題目你已經知道了是什么內容,沒錯。里面有很多經典的機器學習論文值得仔細與反復的閱讀。
《機器學習視頻庫》
介紹:視頻由加州理工學院(Caltech)出品。需要英語底子。
《機器學習經典書籍》
介紹:總結了機器學習的經典書籍,包括數學基礎和算法理論的書籍,可做為入門參考書單。
《16 Free eBooks On Machine Learning》
介紹:16本機器學習的電子書,可以下載下來在pad,手機上面任意時刻去閱讀。不多我建議你看完一本再下載一本。
《A Large set of Machine Learning Resources for Beginners to Mavens》
介紹:標題很大,從新手到專家。不過看完上面所有資料。肯定是專家了
《機器學習最佳入門學習資料匯總》
介紹:入門的書真的很多,而且我已經幫你找齊了。
《Sibyl》
介紹:Sibyl 是一個監督式機器學習系統,用來解決預測方面的問題,比如 YouTube 的視頻推薦。
《Deep Learning》
介紹:Yoshua Bengio, Ian Goodfellow,Aaron Courville著
《Neural Network & Text Mining》
介紹:關于(Deep)Neural Networks在 NLP 和 TextMining 方面一些paper的總結
《前景目標檢測1(總結)》
介紹:計算機視覺入門之前景目標檢測1(總結)
《行人檢測》
介紹:計算機視覺入門之行人檢測
《Deep Learning – important resources for learning and understanding》
介紹:Important resources for learningand understanding . Is awesome
《Machine Learning Theory: An Introductory Primer》
介紹:這又是一篇機器學習初學者的入門文章。值得一讀
《Neural Networks and Deep Learning》
介紹:在線NeuralNetworks and Deep Learning電子書
《Python 網頁爬蟲 & 文本處理 & 科學計算 & 機器學習 & 數據挖掘兵器譜》
介紹:python的17個關于機器學習的工具
《神奇的伽瑪函數(上)》
介紹:下集在這里神奇的伽瑪函數(下)
《分布式機器學習的故事》
介紹:作者王益目前是騰訊廣告算法總監,王益博士畢業后在google任研究。這篇文章王益博士7年來從谷歌到騰訊對于分布機器學習的所見所聞。值得細讀
《機器學習提升之道(Level-Up Your Machine Learning)》
介紹:把機器學習提升的級別分為0~4級,每級需要學習的教材和掌握的知識。這樣,給機器學習者提供一個上進的路線圖,以免走彎路。另外,整個網站都是關于機器學習的,資源很豐富。
《Machine Learning Surveys》
介紹:機器學習各個方向綜述的網站
《Deep Learning Reading list》
介紹:深度學習閱資源列表
《Deep Learning: Methods and Applications》
介紹:這是一本來自微的研究員 li Peng和Dong Yu所著的關于深度學習的方法和應用的電子書
《Machine Learning Summer School 2014》
介紹:2014年七月CMU舉辦的機器學習夏季課剛剛結束有近50小時的視頻、十多個PDF版幻燈片,覆蓋 深度學習,貝葉斯,分布式機器學習,伸縮性等熱點話題。所有13名講師都是牛人:包括大牛Tom Mitchell (他的[機器學習]是名校的常用教材),還有CMU李沐 .(1080P高清喲)
《Sibyl: 來自Google的大規模機器學習系統》
介紹:在今年的IEEE/IFIP可靠系統和網絡(DSN)國際會議上,Google軟件工程師Tushar Chandra做了一個關于Sibyl系統的主題演講。 Sibyl是一個監督式機器學習系統,用來解決預測方面的問題,比如YouTube的視頻推薦。詳情請閱讀google sibyl
《Building a deeper understanding of images》
介紹:谷歌研究院的ChristianSzegedy在谷歌研究院的博客上簡要地介紹了他們今年參加ImageNet取得好成績的GoogLeNet系統.是關于圖像處理的。
《Bayesian network 與python概率編程實戰入門》
介紹:貝葉斯學習。如果不是很清可看看概率編程語言與貝葉斯方法實踐
《AMA: Michael I Jordan》
介紹:網友問伯克利機器學習大牛、美國雙料院士Michael I. Jordan:”如果你有10億美金,你怎么花?Jordan: “我會用這10億美金建造一個NASA級別的自然語言處理研究項目。”
《機器學習&數據挖掘筆記_16(常見面試之機器學習算法思想簡單梳理)》
介紹:常見面試之機器學習算法思想簡單梳理
《文本與數據挖掘視頻匯總》
介紹:Videolectures上最受歡迎的25個文本與數據挖掘視頻匯總
《怎么選擇深度學習的GPUs》
介紹:在Kaggle上經常取得不錯成績的Tim Dettmers介紹了他自己是怎么選擇深度學習的GPUs, 以及個人如何構建深度學習的GPU集群:?http://t.cn/RhpuD1G
《對話機器學習大神Michael Jordan:深度模型》
介紹:對話機器學習大神MichaelJordan
《Deep Learning 和 Knowledge Graph 引爆大數據革命》
介紹:還有2,3部分。http://blog.sina.com.cn/s/blog_46d0a3930101gs5h.html
《Deep Learning 教程翻譯》
介紹:是Stanford 教授Andrew Ng 的 Deep Learning 教程,國內的機器學習愛好者很熱心的把這個教程翻譯成了中文。如果你英語不好,可以看看這個
《Deep Learning 101》
介紹:因為近兩年來,深度學習在媒體界被炒作很厲害(就像大數據)。其實很多人都還不知道什么是深度學習。這篇文章由淺入深。告訴你深度學究竟是什么!
《UFLDL Tutorial》
介紹:這是斯坦福大學做的一免費課程(很勉強),這個可以給你在深度學習的路上給你一個學習的思路。里面提到了一些基本的算法。而且告訴你如何去應用到實際環境中。中文版
《Toronto Deep Learning Demos》
介紹:這是多倫多大學做的一個深度學習用來識別圖片標簽/圖轉文字的demo。是一個實際應用案例。有源碼
《Deep learning from the bottom up》
介紹:機器學習模型,閱讀這個內容需要有一定的基礎。
《R工具包的分類匯總》
介紹: (CRAN Task Views, 34種常見任務,每個任務又各自分類列舉若干常用相關工具包) 例如: 機器學習,自然語言處理,時間序列分析,空間信息分析,多重變量分析,計量經濟學,心理統計學,社會學統計,化學計量學,環境科學,藥物代謝動力學等
《機器學習常見算法分類匯總》
介紹: 機器學習無疑是當前數據分析領域的一個熱點內容。很多人在平時的工作中都或多或少會用到機器學習的算法。本文為您總結一下常見的機器學習算法,以供您在工作和學習中參考.
《Deep Learning(深度學習)學習筆記整理系列》
介紹: 很多干貨,而且作者還總結了好幾個系列。另外還作者還了一個文章導航.非常的感謝作者總結。
Deep Learning(深度學習)學習筆記整理系列之(二)
Deep Learning(深度學習)學習筆記整理系列之(三)
Deep Learning(深度學習)學習筆記整理系列之(四)
Deep Learning(深度學習)學習筆記整理系列之(五)
Deep Learning(深度學習)學習筆記整理系列之(六)
Deep Learning(深度學習)學習筆記整理系列之(七)
DeepLearning(深度學習)學習筆記整理系列之(八)
《Tutorials Session A – Deep Learning for Computer Vision》
介紹:傳送理由:RobFergus的用深度學習做計算機是覺的NIPS 2013教程。有mp4, mp3, pdf各種下載 他是紐約大學教授,目前也在Facebook工作,他2014年的8篇論文
《FudanNLP》
介紹:FudanNLP,這是一個復旦大學計算機學院開發的開源中文自然語言處理(NLP)工具包 Fudan NLP里包含中文分詞、關鍵詞抽取、命名實體識別、詞性標注、時間詞抽取、語法分析等功能,對搜索引擎文本分析等極為有價值。
《Open Sourcing ml-ease》
介紹:LinkedIn 開源的機器學習工具包,支持單機, Hadoop cluster,和 Spark cluster 重點是 logistic regression 算法
《機器學習周刊》
介紹:對于英語不好,但又很想學習機器學習的朋友。是一個大的福利。機器學習周刊目前主要提供中文版,還是面向廣大國內愛好者,內容涉及機器學習、數據挖掘、并行系統、圖像識別、人工智能、機器人等等。謝謝作者
《線性代數》
介紹:《線性代數》是《機器學習》的重要數學先導課程。其實《線代》這門課講得淺顯易懂特別不容易,如果一上來就講逆序數及羅列行列式性質,很容易讓學生失去學習的興趣。我個人推薦的最佳《線性代數》課程是麻省理工Gilbert Strang教授的課程。 課程主頁
《Big-data》
介紹:大數據數據處理資源、工具不完備列表,從框架、分布式編程、分布式文件系統、鍵值數據模型、圖數據模型、數據可視化、列存儲、機器學習等。很贊的資源匯總。
《machine learning for smart dummies》
介紹:雅虎邀請了一名來自本古里安大學的訪問學者,制作了一套關于機器學習的系列視頻課程。本課程共分為7期,詳細講解了有關SVM, boosting, nearest neighbors,decision trees 等常規機器學習算法的理論基礎知識。
《Entanglement-Based Quantum Machine Learning》
介紹:應對大數據時代,量子機器學習的第一個實驗 paper 下載
《How a Math Genius Hacked OkCupid to Find True Love》
介紹:Wired雜志報道了UCLA數學博士Chris McKinlay (圖1)通過大數據手段+機器學習方法破解婚戀網站配對算法找到真愛的故事,通過Python腳本控制著12個賬號,下載了婚戀網站2萬女用戶的600萬問題答案,對他們進行了統計抽樣及聚類分析(圖2,3),最后終于收獲了真愛。科技改變命運!
《Underactuated Robotics》
介紹:MIT的UnderactuatedRobotics于 2014年10月1日開課,該課屬于MIT研究生級別的課程,對機器人和非線性動力系統感興趣的朋友不妨可以挑戰一下這門課程!
《mllib實踐經驗(1)》
介紹:mllib實踐經驗分享
《Google Turns To Deep Learning Classification To Fight Web Spam》
介紹:Google用DeepLearning做的antispam(反垃圾郵件)
《NLP常用信息資源》
介紹:NLP常用信息資源*《NLP常用信息資源》
《機器學習速查表》
介紹:機器學習速查表
《Best Papers vs. Top Cited Papers in Computer Science》
介紹:從1996年開始在計算機科學的論文中被引用次數最多的論文
《InfiniTAM: 基于深度圖像的體數據集成框架》
介紹:把今年的一個ACM Trans. on Graphics (TOG)論文中的代碼整理為一個開源的算法框架,共享出來了。歡迎大家使用。可以實時的采集3D數據、重建出三維模型。Online learning,GPU Random forest,GPU CRF也會后續公開。
《Hacker’s guide to Neural Networks》
介紹:【神經網絡黑客指南】現在,最火莫過于深度學習(DeepLearning),怎樣更好學習它?可以讓你在瀏覽器中,跑起深度學習效果的超酷開源項目convnetjs作者karpathy告訴你,最佳技巧是,當你開始寫代碼,一切將變得清晰。他剛發布了一本圖書,不斷在線更新
《Building a Production Machine Learning Infrastructure》
介紹:前Google廣告系統工程師Josh Wills 講述工業界和學術界機器學習的異同,大實話
《Deep Learning Sentiment Analysis for Movie Reviews using Neo4j》
介紹:使用Neo4j 做電影評論的情感分析。
《DeepLearning.University – An Annotated Deep Learning Bibliography》
介紹:不僅是資料,而且還對有些資料做了注釋。
《A primer on deeping learning》
介紹:深度學習入門的初級讀本
《Machine learning is teaching us the secret to teaching 》
介紹:機器學習教會了我們什么?
《scikit-learn:用于機器學習的Python模塊》
介紹:scikit-learn是在SciPy基礎上構建的用于機器學習的Python模塊。
《對話機器學習大神Michael Jordan:解析領域中各類模型》
介紹:喬丹教授(Michael I. Jordan)教授是機器學習領域神經網絡的大牛,他對深度學習、神經網絡有著很濃厚的興趣。因此,很多提問的問題中包含了機器學習領域的各類模型,喬丹教授對此一一做了解釋和展望。
《A*搜索算法的可視化短教程》
介紹:A*搜索是人工智能基本算法,用于高效地搜索圖中兩點的最佳路徑, 核心是 g(n)+h(n): g(n)是從起點到頂點n的實際代價,h(n)是頂點n到目標頂點的估算代價。合集
《基于云的自然語言處理開源項目FudanNLP》
介紹:本項目利用了Microsoft Azure,可以在幾分種內完成NLP on Azure Website的部署,立即開始對FNLP各種特性的試用,或者以REST API的形式調用FNLP的語言分析功能
《吳立德《概率主題模型&數據科學基礎》》
介紹:現任復旦大學首席教授、計算機軟件博士生導師。計算機科學研究所副所長.內部課程
《機器學習入門資源不完全匯總》》
介紹:好東西的干貨真的很多
《收集從2014年開始深度學習文獻》
介紹:從硬件、圖像到健康、生物、大數據、生物信息再到量子計算等,AmundTveit等維護了一個DeepLearning.University小項目:收集從2014年開始深度學習文獻,相信可以作為深度學習的起點,github
《EMNLP上兩篇關于股票趨勢的應用論文 》
介紹:EMNLP上兩篇關于stocktrend 用到了deep model組織特征;Exploiting Social Relations and Sentiment for Stock Prediction用到了stock network。
《Bengio組(蒙特利爾大學LISA組)深度學習教程 》
介紹:作者是深度學習一線大牛Bengio組寫的教程,算法深入顯出,還有實現代碼,一步步展開。
《學習算法的Neural Turing Machine 》
介紹:許多傳統的機器學習任務都是在學習function,不過谷歌目前有開始學習算法的趨勢。谷歌另外的這篇學習Python程序的Learning to Execute也有相似之處
《Learning to Rank for Information Retrieval and Natural LanguageProcessing》
介紹:作者是華為技術有限公司,諾亞方舟實驗室,首席科學家的李航博士寫的關于信息檢索與自然語言處理的文章
《Rumor has it: Identifying Misinformation in Microblogs》
介紹:利用機用器學習在謠言的判別上的應用,此外還有兩個。一個是識別垃圾與虛假信息的paper.還有一個是網絡輿情及其分析技術
《R機器學習實踐》
介紹:該課程是網易公開課的收費課程,不貴,超級便宜。主要適合于對利用R語言進行機器學習,數據挖掘感興趣的人。
《大數據分析:機器學習算法實現的演化》
介紹:本章中作者總結了三代機器學習算法實現的演化:第一代非分布式的, 第二代工具如Mahout和Rapidminer實現基于Hadoop的擴展,第三代如Spark和Storm實現了實時和迭代數據處理。BIG DATA ANALYTICS BEYOND HADOOP
《圖像處理,分析與機器視覺》
介紹:講計算機視覺的四部奇書(應該叫經典吧)之一,另外三本是Hartley的《多圖幾何》、Gonzalez的《數字圖像處理》、Rafael C.Gonzalez / Richard E.Woods 的《數字圖像處理》
《LinkedIn最新的推薦系統文章Browsemaps》
介紹:里面基本沒涉及到具體算法,但作者介紹了CF在LinkedIn的很多應用,以及他們在做推薦過程中獲得的一些經驗。最后一條經驗是應該監控log數據的質量,因為推薦的質量很依賴數據的質量!
《初學者如何查閱自然語言處理(NLP)領域學術資料》
介紹:初學者如何查閱自然語言處理(NLP)領域學術資料
《樹莓派的人臉識別教程》
介紹:用樹莓派和相機模塊進行人臉識別
《利用深度學習與大數據構建對話系統》
介紹:如何利用深度學習與大數據構建對話系統
《經典論文Leo Breiman:Statistical Modeling: The TwoCultures 》
介紹:Francis Bach合作的有關稀疏建模的新綜述(書):Sparse Modelingfor Image and Vision Processing,內容涉及Sparsity,Dictionary Learning, PCA, Matrix Factorization等理論,以及在圖像和視覺上的應用,而且第一部分關于Why does the l1-norm induce sparsity的解釋也很不錯。
《Reproducing Kernel Hilbert Space》
介紹:RKHS是機器學習中重要的概念,其在large margin分類器上的應用也是廣為熟知的。如果沒有較好的數學基礎,直接理解RKHS可能會不易。本文從基本運算空間講到Banach和Hilbert空間,深入淺出,一共才12頁。
《Hacker’s guide to Neural Networks》
介紹:許多同學對于機器學習及深度學習的困惑在于,數學方面已經大致理解了,但是動起手來卻不知道如何下手寫代碼。斯坦福深度學習博士Andrej Karpathy寫了一篇實戰版本的深度學習及機器學習教程,手把手教你用Javascript寫神經網絡和SVM.
《【語料庫】語料庫資源匯總》
介紹:【語料庫】語料庫資源匯總
《機器學習算法之旅》
介紹:本文會過一遍最流行的機器學習算法,大致了解哪些方法可用,很有幫助。
《Reproducible Research in Computational Science》
介紹:這個里面有很多關于機器學習、信號處理、計算機視覺、深入學習、神經網絡等領域的大量源代碼(或可執行代碼)及相關論文。科研寫論文的好資源
《NYU 2014年的深度學習課程資料》
介紹:NYU 2014年的深度學習課程資料,有視頻
《計算機視覺數據集不完全匯總》
介紹:計算機視覺數據集不完全匯總
《Machine Learning Open Source Software》
介紹:機器學習開源軟件
《LIBSVM》
介紹:A Library for Support VectorMachines
《Support Vector Machines》
介紹:數據挖掘十大經典算法之一
《100 Best GitHub: Deep Learning》
介紹:github上面100個非常棒的項目
《加州大學歐文分校(UCI)機器學習數據集倉庫》
介紹:當前加州大學歐文分校為機器學習社區維護著306個數據集。查詢數據集
《Andrej Karpathy個人主頁》
介紹:Andrej Karpathy 是斯坦福大學Li Fei-Fei的博士生,使用機器學習在圖像、視頻語義分析領域取得了科研和工程上的突破,發的文章不多,但每個都很扎實,在每一個問題上都做到了state-of-art.
《Andrej Karpathy的深度強化學習演示》
介紹:Andrej Karpathy的深度強化學習演示,論文在這里
《CIKM數據挖掘競賽奪冠算法-陳運文》
介紹:CIKM Cup(或者稱為CIKM Competition)是ACM CIKM舉辦的國際數據挖掘競賽的名稱。
《Geoffrey E. Hinton》
介紹:杰弗里·埃弗里斯特·辛頓 FRS是一位英國出生的計算機學家和心理學家,以其在神經網絡方面的貢獻聞名。辛頓是反向傳播算法和對比散度算法的發明人之一,也是深度學習的積極推動者.
《自然語言處理的深度學習理論與實際》
介紹:微軟研究院深度學習技術中心在CIKM2014 上關于《自然語言處理的深度學習理論與實際》教學講座的幻燈片
《用大數據和機器學習做股票價格預測》
介紹: 本文基于<支持向量機的高頻限價訂單的動態建模>采用了 Apache Spark和Spark MLLib從紐約股票交易所的訂單日志數據構建價格運動預測模型。(股票有風險,投資謹慎)GitHub源代碼托管地址.
《關于機器學習的若干理論問題》
介紹:徐宗本 院士將于熱愛機器學習的小伙伴一起探討有關于機器學習的幾個理論性問題,并給出一些有意義的結論。最后通過一些實例來說明這些理論問題的物理意義和實際應用價值。
《深度學習在自然語言處理的應用》
介紹:作者還著有《這就是搜索引擎:核心技術詳解》一書,主要是介紹應用層的東西
《Undergraduate machine learning at UBC》
介紹:機器學習課程
《人臉識別必讀的N篇文章》
介紹:人臉識別必讀文章推薦
《推薦系統經典論文文獻及業界應用》
介紹:推薦系統經典論文文獻
《人臉識別必讀的N篇文章》
介紹:人臉識別必讀文章推薦
《第十二屆中國”機器學習及其應用”研討會PPT》
介紹:第十二屆中國”機器學習及其應用”研討會PPT
《統計機器學習》
介紹:統計學習是關于計算機基于數據構建的概率統計模型并運用模型對數據進行預測和分析的一門科學,統計學習也成為統計機器學習。課程來自上海交通大學
《機器學習導論》
介紹:機器學習的目標是對計算機編程,以便使用樣本數據或以往的經驗來解決給定的問題.
《CIKM 2014主題報告的幻燈片》
介紹:CIKM 2014 Jeff Dean、Qi Lu、Gerhard Weikum的主題報告的幻燈片, Alex Smola、Limsoon Wong、Tong Zhang、Chih-Jen Lin的Industry Track報告的幻燈片
《人工智能和機器學習領域有趣的開源項目》
介紹:部分中文列表
《機器學習經典算法詳解及Python實現–基于SMO的SVM分類器》
介紹:此外作者還有一篇元算法、AdaBoost python實現文章
《Numerical Optimization: Understanding L-BFGS》
介紹:加州伯克利大學博士AriaHaghighi寫了一篇超贊的數值優化博文,從牛頓法講到擬牛頓法,再講到BFGS以及L-BFGS, 圖文并茂,還有偽代碼。強烈推薦。
《簡明深度學習方法概述(一)》
介紹:還有續集簡明深度學習方法概述(二)
《R language for programmers》
介紹:R語言程序員私人定制版
《谷歌地圖解密:大數據與機器學習的結合》
介紹:谷歌地圖解密
《空間數據挖掘常用方法》
介紹:空間數據挖掘常用方法
《Use Google’s Word2Vec for movie reviews》
介紹:Kaggle新比賽”When bag of words meets bags of popcorn“ aka ”邊學邊用word2vec和deep learning做NLP“ 里面全套教程教一步一步用python和gensim包的word2vec模型,并在實際比賽里面比調參數和清數據。如果已裝過gensim不要忘升級
《PyNLPIR》
介紹:PyNLPIR提供了NLPIR/ICTCLAS漢語分詞的Python接口,此外Zhon提供了常用漢字常量,如CJK字符和偏旁,中文標點,拼音,和漢字正則表達式(如找到文本中的繁體字)
《深度卷積神經網絡下圍棋》
介紹:這文章說把最近模型識別上的突破應用到圍棋軟件上,打16萬張職業棋譜訓練模型識別功能。想法不錯。訓練后目前能做到不用計算,只看棋盤就給出下一步,大約10級棋力。但這篇文章太過樂觀,說什么人類的最后一塊堡壘馬上就要跨掉了。話說得太早。不過,如果與別的軟件結合應該還有潛力可挖。@萬精油墨綠
《NIPS審稿實驗》
介紹:UT Austin教授Eric Price關于今年NIPS審稿實驗的詳細分析,他表示,根據這次實驗的結果,如果今年NIPS重新審稿的話,會有一半的論文被拒。
《2014年最佳的大數據,數據科學文章》
介紹:KDNuggets分別總結了2014年14個閱讀最多以及分享最多的文章。我們從中可以看到多個主題——深度學習,數據科學家職業,教育和薪酬,學習數據科學的工具比如R和Python以及大眾投票的最受歡迎的數據科學和數據挖掘語言
《機器學習經典算法詳解及Python實現–線性回歸(LinearRegression)算法》
介紹:Python實現線性回歸,作者還有其他很棒的文章推薦可以看看
《2014中國大數據技術大會33位核心專家演講PDF》
介紹:2014中國大數據技術大會33位核心專家演講PDF下載
《使用RNN和Paragraph Vector做情感分析》
介紹:這是T. Mikolov & Y. Bengio最新論文Ensemble of Generative and Discriminative Techniques for SentimentAnalysis of Movie Reviews ,使用RNN和PV在情感分析效果不錯,[項目代碼](https://github.com/mesnilgr/iclr15)公布在github(目前是空的)。這意味著ParagraphVector終于揭開面紗了嘛。
《NLPIR/ICTCLAS2015分詞系統大會上的技術演講 》
介紹:NLPIR/ICTCLAS2015分詞系統發布與用戶交流大會上的演講,請更多朋友檢閱新版分詞吧。我們實驗室同學的演講包括:孫夢姝-基于評論觀點挖掘的商品搜索技術研究 李然-主題模型
《Machine Learning is Fun!》
介紹:Convex Neural Networks 解決維數災難
《CNN的反向求導及練習》
介紹:介紹CNN參數在使用bp算法時該怎么訓練,畢竟CNN中有卷積層和下采樣層,雖然和MLP的bp算法本質上相同,但形式上還是有些區別的,很顯然在完成CNN反向傳播前了解bp算法是必須的。此外作者也做了一個資源集:機器學習,深度學習,視覺,數學等
《正則表達式優化成Trie樹 》
介紹:如果要在一篇文章中匹配十萬個關鍵詞怎么辦?Aho-Corasick 算法利用添加了返回邊的Trie樹,能夠在線性時間內完成匹配。但如果匹配十萬個正則表達式呢 ? 這時候可以用到把多個正則優化成Trie樹的方法,如日本人寫的 Regexp::Trie
《Deep learning Reading List》
介紹:深度學習閱讀清單
《Caffe》
介紹:Caffe是一個開源的深度學習框架,作者目前在google工作,作者主頁Yangqing Jia (賈揚清)
《GoogLeNet深度學習模型的Caffe復現 》
介紹:2014 ImageNet冠軍GoogLeNet深度學習模型的Caffe復現模型,GoogleNet論文.
《LambdaNet,Haskell實現的開源人工神經網絡庫 》
介紹:LambdaNetLambdaNet是由Haskell實現的一個開源的人工神經網絡庫,它抽象了網絡創建、訓練并使用了高階函數。該庫還提供了一組預定義函數,用戶可以采取多種方式組合這些函數來操作現實世界數據。
《百度余凱&張潼機器學習視頻》
介紹:如果你從事互聯網搜索,在線廣告,用戶行為分析,圖像識別,自然語言理解,或者生物信息學,智能機器人,金融預測,那么這門核心課程你必須深入了解。
《楊強在TEDxNanjing談智能的起源》
介紹:”人工智能研究分許多流派。其中之一以IBM為代表,認為只要有高性能計算就可得到智能,他們的‘深藍’擊敗了世界象棋冠軍;另一流派認為智能來自動物本能;還有個很強的流派認為只要找來專家,把他們的思維用邏輯一條條寫下,放到計算機里就行……” 楊強在TEDxNanjing談智能的起源
《深度RNN/LSTM用于結構化學習 0)序列標注Connectionist Temporal ClassificationICML06》
介紹:1)機器翻譯Sequenceto Sequence NIPS14 2)成分句法GRAMMAR AS FOREIGN LANGUAGE
《Deep Learning實戰之word2vec》
介紹:網易有道的三位工程師寫的word2vec的解析文檔,從基本的詞向量/統計語言模型->NNLM->Log-Linear/Log-Bilinear->層次化Log-Bilinear,到CBOW和Skip-gram模型,再到word2vec的各種tricks,公式推導與代碼,基本上是網上關于word2vec資料的大合集,對word2vec感興趣的朋友可以看看
《Machine learning open source software》
介紹:機器學習開源軟件,收錄了各種機器學習的各種編程語言學術與商業的開源軟件.與此類似的還有很多例如:DMOZ – Computers: Artificial Intelligence: Machine Learning:Software, LIBSVM — A Library for Support VectorMachines, Weka 3: Data Mining Software in Java, scikit-learn:Machine Learning in Python, NaturalLanguage Toolkit:NLTK, MAchine Learning for LanguagEToolkit, Data Mining – Fruitful and Fun, Open Source Computer Vision Library
《機器學習入門者學習指南》
介紹:作者是計算機研二(寫文章的時候,現在是2015年了應該快要畢業了),專業方向自然語言處理.這是一點他的經驗之談.對于入門的朋友或許會有幫助
《A Tour of Machine Learning Algorithms》
介紹:這是一篇關于機器學習算法分類的文章,非常好
《2014年的《機器學習日報》大合集》
介紹:機器學習日報里面推薦很多內容,在這里有一部分的優秀內容就是來自機器學習日報.
《 Image classification with deep learning常用模型》
介紹:這是一篇關于圖像分類在深度學習中的文章
《自動語音識別:深度學習方法》
介紹:作者與Bengio的兄弟Samy 09年合編《自動語音識別:核方法》 3)李開復1989年《自動語音識別》專著,其博導、94年圖靈獎得主Raj Reddy作序
《NLP中的中文分詞技術》
介紹: 作者是360電商技術組成員,這是一篇NLP在中文分詞中的應用
《Using convolutional neural nets to detect facial keypoints tutorial》
介紹: 使用deeplearning的人臉關鍵點檢測,此外還有一篇AWS部署教程
《書籍推薦:Advanced Structured Prediction》
介紹: 由SebastianNowozin等人編纂MIT出版的新書《AdvancedStructured Prediction》http://t.cn/RZxipKG ,匯集了結構化預測領域諸多牛文,涉及CV、NLP等領域,值得一讀。網上公開的幾章草稿:一,二,三,四,五
《An Introduction to Matrix Concentration Inequalities》
介紹: Tropp把數學家用高深裝逼的數學語言寫的矩陣概率不等式用初等的方法寫出來,是非常好的手冊,領域內的paper各種證明都在用里面的結果。雖說是初等的,但還是非常的難
《The free big data sources you should know》
介紹: 不容錯過的免費大數據集,有些已經是耳熟能詳,有些可能還是第一次聽說,內容跨越文本、數據、多媒體等,讓他們伴你開始數據科學之旅吧,具體包括:Data.gov、US Census Bureau、European Union Open Data Portal、Data.gov.uk等
《A Brief Overview of Deep Learning》
介紹: 谷歌科學家、Hinton親傳弟子Ilya Sutskever的深度學習綜述及實際建議
《A Deep Dive into Recurrent Neural Nets》
介紹: 非常好的討論遞歸神經網絡的文章,覆蓋了RNN的概念、原理、訓練及優化等各個方面內容,強烈推薦!本文作者NikhilBuduma還有一篇Deep Learning in a Nutshell值得推薦
《機器學習:學習資源》
介紹:里面融合了很多的資源,例如競賽,在線課程,demo,數據整合等。有分類
《Statistical foundations of machine learning》
介紹:《機器學習的統計基礎》在線版,該手冊希望在理論與實踐之間找到平衡點,各主要內容都伴有實際例子及數據,書中的例子程序都是用R語言編寫的。
《A Deep Learning Tutorial: From Perceptrons to Deep Networks》
介紹:IVAN VASILEV寫的深度學習導引:從淺層感知機到深度網絡。高可讀
《Research priorities for robust and beneficial artificialintelligence》
介紹:魯棒及有益的人工智能優先研究計劃:一封公開信,目前已經有Stuart Russell, Tom Dietterich, EricHorvitz, Yann LeCun, Peter Norvig, Tom Mitchell, Geoffrey Hinton, Elon Musk等人簽署The Future of Life Institute (FLI).這封信的背景是最近霍金和Elon Musk提醒人們注意AI的潛在威脅。公開信的內容是AI科學家們站在造福社會的角度,展望人工智能的未來發展方向,提出開發AI系統的Verification,Validity, Security, Control四點要求,以及需要注意的社會問題。畢竟當前AI在經濟領域,法律,以及道德領域相關研究較少。其實還有一部美劇《疑犯追蹤》,介紹了AI的演進從一開始的自我學習,過濾,圖像識別,語音識別等判斷危險,到第四季的時候出現了機器通過學習成長之后想控制世界的狀態。說到這里推薦收看。
《metacademy》
介紹:里面根據詞條提供了許多資源,還有相關知識結構,路線圖,用時長短等。號稱是”機器學習“搜索引擎
《FAIR open sources deep-learning modules for Torch》
介紹:Facebook人工智能研究院(FAIR)開源了一系列軟件庫,以幫助開發者建立更大、更快的深度學習模型。開放的軟件庫在Facebook 被稱作模塊。用它們替代機器學習領域常用的開發環境 Torch 中的默認模塊,可以在更短的時間內訓練更大規模的神經網絡模型。
《淺析人臉檢測之Haar分類器方法》
介紹:本文雖然是寫于2012年,但是這篇文章完全是作者的經驗之作。
《如何成為一位數據科學家》
介紹:本文是對《機器學習實戰》作者Peter Harrington做的一個訪談。包含了書中部分的疑問解答和一點個人學習建議。
?
總結
以上是生活随笔為你收集整理的自学成才秘籍!机器学习深度学习经典资料汇总的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 游侠随笔:关于业务型数据库审计 有图有真
- 下一篇: B站首个千万级up主!论老番茄是如何炼成