DotnetSpider 至力于打造一個輕量化、高效率、易開發(fā)、可管理的一體化爬蟲框架。它的核心要素是URL調(diào)度、基本的網(wǎng)頁內(nèi)容下載器、基于爬蟲實體類的爬蟲實現(xiàn)模式、常用數(shù)據(jù)庫的支持、多線程的支持、狀態(tài)的監(jiān)控、運行日志、網(wǎng)頁端管理。

DotnetSpider 具有相當高的可定制性，支持包括 MSSQL、MySQL、PostgreSQL、MongoDB 在內(nèi)的多種數(shù)據(jù)庫，文檔（目錄？）齊全，樣例豐富、通俗易懂，同時還自帶了 Web Manager（依賴于作者的另一個項目 Scheduler.NET）

項目：https://github.com/dotnetcore/DotnetSpider
Web Manager：https://github.com/zlzforever/DotnetSpider.Hub
Scheduler.NET：https://github.com/zlzforever/Scheduler.NET

授權：GPL-3.0
Wiki：https://github.com/dotnetcore/DotnetSpider/wiki

作者：Zlzforever
GitHub：https://github.com/zlzforever
QQ群：477731655

---

DotnetSpider 自加入 NCC 起始終堅持不懈的更新、完善，作者帥氣、為人風趣幽默；項目日趨成熟、追求完美，于 2018 年 5 月下旬成為 NCC 第三個星數(shù)破千的項目，值得祝賀。為此，經(jīng) NCC 授權，由 AlexLEWIS 贈送 DotnetSpider 作者 Zlzforever 先生圖書一本。

一本游戲力，祝你家小蘿莉健康茁壯成長。

---

本項目的作者將在 6 月 30 日 NCC 小聚會上做專題演講《大話網(wǎng)絡爬蟲》。

演講將采用錄播方式，在事后為大家奉上。

---

如果您有項目想加入我們，歡迎來?http://github.com/dotnetcore/home?提請

原文地址：https://www.cnblogs.com/forerunner/p/ncc-dotnetspider-with-over-thousand-stars.html

.NET社區(qū)新聞，深度好文，歡迎訪問公眾號文章匯總 http://www.csharpkit.com

總結

以上是生活随笔為你收集整理的.NET Core Community 第三个千星项目诞生：爬虫 DotnetSpider的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。