• 回答数

    2

  • 浏览数

    275

a长了一半的草
首页 > 工程师考试 > 爬虫工程师是干什么的

2个回答 默认排序
  • 默认排序
  • 按时间排序

细毛1015

已采纳

作为爬虫工程师,就是要写出一些能够沿着网爬的”蜘蛛“程序,保存下来获得的信息。一般来说,需要爬出来的信息都是结构化的,如果不是结构化的,那么也就没什么意义了(百分之八十的数据是非结构化的)。爬虫的规模可达可小,小到可以爬取豆瓣的top 250电影,定时爬取一个星期的天气预报等。

爬虫工程师是干什么的

359 评论(8)

5ichocolate

需要。Python爬虫工程师认证证书有很多,比如常见的证书有:全国计算机等级考试Python程序语言设计、PythonInstitute资格认证初级PCEP证书、PythonInstitute资格认证中级PCAP证书、PythonInstitute资格认证高级PCPP证书、工信部Python技术应用工程师专项技术证、百度技术认证深度学习工程师。爬虫工程师岗位职责:设计和开发分布式网络爬虫系统;进行多平台信息的抓取和分析工作,实时监控爬虫的进度和警报反馈等。

286 评论(14)

相关问答