爬虫实战项目（一）
本次项目主要是爬取某论坛网站
明确目标
1.帖子
2.回答
3.用户信息（如果抓取用户，通过粉丝和关注进行抓取）
抓取策略
全站抓取策略：通过herf链接进行抓取
分析抓取网站的数据构成，避免出现循环，分散的抓取
页面是否动态
一般都是静态页面，详细见
https://www.cnblogs.com/bluesungz/p/5955170.html
2020-08-03 16:00 北京航空航天大学 C++
关注
全部评论
相关推荐
全站热榜
更多
创作者周榜
更多
正在热议
更多
# 哪些公司开提前批了？ #
25099次浏览 256人参与
# 实习如何「偷」产出？ #
49318次浏览 1291人参与
# 风评不好的公司，你会去吗？ #
59026次浏览 428人参与
# 除了主业以外，你还有哪些其他收入？ #
11679次浏览 198人参与
# 不卡学历的大厂有哪些？ #
27825次浏览 222人参与
# 校招阶段，学历VS技术哪个更重要？ #
16961次浏览 183人参与
# 华子oc时间线 #
1243937次浏览 6483人参与
# 职场新人体验 #
24577次浏览 232人参与
# 腾讯音乐求职进展汇总 #
98023次浏览 570人参与
# 社恐入职新公司如何融入团队 #
11747次浏览 63人参与
# 校园里的破防时刻 #
10886次浏览 123人参与
# Offer比较，你最看重什么？ #
191521次浏览 1301人参与
# 你觉得技术面多长时间合理？ #
100168次浏览 720人参与
# 实习打杂，要跑路吗 #
17891次浏览 202人参与
# 你投递的公司有几家约面了？ #
108846次浏览 779人参与
# 正在实习的碎碎念 #
1454530次浏览 13469人参与
# 实习时，大家都怎么称呼自己的mentor？ #
43710次浏览 276人参与
# 百度秋招提前批进度 #
110319次浏览 1175人参与
# 你的秋招第一场笔试是哪家 #
147327次浏览 1484人参与
# 你最满意的offer薪资是哪家公司？ #
33053次浏览 176人参与