主流爬虫框架的基本介绍引言获取：目前都有哪些爬虫技术？理解：这些爬虫技术的特色是什么？扩展：快速上手一下cdp4j爬虫技术。纠错：解析网页过程中踩过的坑与填坑之路。应用：实战爬取网易新闻评论内容。正文一、目前的主流java爬虫框架包括   Python中有Scrapy、Pyspider;Java中有Nutch,WebMagic,WebCollector,heritrix3,Crawler4j这些框架有哪些优缺点?(1)、Scrapy:         Scrapy，Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，...