数据获取能力(开发能力)
数据获取通常需要写代码来实现。不同类型的数据获取需要不同的开发能力。比如数据爬取通常用python,大数据处理通常用hadoop/spark/scala,数据库中现成数据的获取需要SQL,众包数据采集可能要写一个sdk或者app,需要客户端开发能力。对效果评测来说,前三项比较常见,地图业务有着大量的线上日志,用大数据处理的方式才能分析。比如要分析线上用户偏航判断错误的情况,需要处理线上用户的日志来分析。
数据获取通常需要写代码来实现。不同类型的数据获取需要不同的开发能力。比如数据爬取通常用python,大数据处理通常用hadoop/spark/scala,数据库中现成数据的获取需要SQL,众包数据采集可能要写一个sdk或者app,需要客户端开发能力。对效果评测来说,前三项比较常见,地图业务有着大量的线上日志,用大数据处理的方式才能分析。比如要分析线上用户偏航判断错误的情况,需要处理线上用户的日志来分析。
全部评论
相关推荐

点赞 评论 收藏
分享
03-24 21:28
长沙理工大学 Java 点赞 评论 收藏
分享
点赞 评论 收藏
分享