DotnetSpider 至力于打造一個(gè)輕量化、高效率、易開發(fā)、可管理的一體化爬蟲框架。它的核心要素是URL調(diào)度、基本的網(wǎng)頁內(nèi)容下載器、基于爬蟲實(shí)體類的爬蟲實(shí)現(xiàn)模式、常用數(shù)據(jù)庫的支持、多線程的支持、狀態(tài)的監(jiān)控、運(yùn)行日志、網(wǎng)頁端管理。

DotnetSpider 具有相當(dāng)高的可定制性，支持包括 MSSQL、MySQL、PostgreSQL、MongoDB 在內(nèi)的多種數(shù)據(jù)庫，文檔（目錄？）齊全，樣例豐富、通俗易懂，同時(shí)還自帶了 Web Manager（依賴于作者的另一個(gè)項(xiàng)目 Scheduler.NET）

項(xiàng)目：https://github.com/dotnetcore/DotnetSpider
Web Manager：https://github.com/zlzforever/DotnetSpider.Hub
Scheduler.NET：https://github.com/zlzforever/Scheduler.NET

授權(quán)：GPL-3.0
Wiki：https://github.com/dotnetcore/DotnetSpider/wiki

作者：Zlzforever
GitHub：https://github.com/zlzforever
QQ群：477731655

---

DotnetSpider 自加入 NCC 起始終堅(jiān)持不懈的更新、完善，作者帥氣、為人風(fēng)趣幽默；項(xiàng)目日趨成熟、追求完美，于 2018 年 5 月下旬成為 NCC 第三個(gè)星數(shù)破千的項(xiàng)目，值得祝賀。為此，經(jīng) NCC 授權(quán)，由 AlexLEWIS 贈(zèng)送 DotnetSpider 作者 Zlzforever 先生圖書一本。

一本游戲力，祝你家小蘿莉健康茁壯成長。

---

本項(xiàng)目的作者將在 6 月 30 日 NCC 小聚會(huì)上做專題演講《大話網(wǎng)絡(luò)爬蟲》。

演講將采用錄播方式，在事后為大家奉上。

---

如果您有項(xiàng)目想加入我們，歡迎來?http://github.com/dotnetcore/home?提請(qǐng)

原文地址：https://www.cnblogs.com/forerunner/p/ncc-dotnetspider-with-over-thousand-stars.html

.NET社區(qū)新聞，深度好文，歡迎訪問公眾號(hào)文章匯總 http://www.csharpkit.com

總結(jié)

以上是生活随笔為你收集整理的.NET Core Community 第三个千星项目诞生：爬虫 DotnetSpider的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。