岗位职责
- 遵循Robots协议,参与爬虫系统的建设与优化,满足各类业务数据需求;
- 负责分布式爬虫系统的建设,优化数据调度、抓取、解析、存储全栈流程;
- 帮助团队攻克各种爬虫技术难关,提升海量数据系统的抓取效果与性能。
职位要求
- 本科及以上学历,2年以上爬虫抓取采集相关工作经验;
- 熟悉主流爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等;
- 熟悉Python/Java/Go/C++其中一种语言,具备扎实的编码能力。
真正值得关注的岗位,常常只在企业官网短暂开放,可能两三天后就下线,也未必会同步到综合招聘平台。没有持续关注,你甚至不会知道它曾经出现。职先机持续聚合并核验官网岗位,帮你抓住职场先机,快人一步。
微信小程序 / 当前岗位
字节跳动资深数据开发工程师