全站数据
8 4 2 0 5 8 1

Github上有什么有趣好玩的C++项目

长沙IT研习社 | 简单学习,快乐成才!         
问题更新日期:2024-10-23 15:15:23

问题描述

Github上有什么有趣好玩的C++项目,在线求解答
精选答案
最佳答案

如下:

大型的:

Nutch

apacheutch·GitHub

适合做搜索引擎,分布式爬虫是其中一个功能。

Heritrix

internetarchive/heritrix3·GitHub比较成熟的爬虫。

小型的:

Crawler4j

yasserg/crawler4j·GitHub

WebCollectorCrawlScript/WebCollector·GitHub(国人作品)

目标是在让你在5分钟之内写好一个爬虫。参考了crawler4j,如果经常需要写爬虫,需要写很多爬虫,还是不错的,因为上手肯定不止5分钟。缺点是它的定制性不强。

WebMagiccode4craft/webmagic·GitHub(国人作品,推荐)

垂直、全栈式、模块化爬虫。更加适合抓取特定领域的信息。它包含了下载、调度、持久化、处理页面等模块。每一个模块你都可以自己去实现,也可以选择它已经帮你实现好的方案。这就有了很强的定制性。