数据采集工程师
8000-10000元
职位投递邮箱:geyan@golaxy.cn
工作地域:江苏省 职位类别:其他专业技术人员 学历要求:本科 招聘人数:1人
发布时间:2024-11-20浏览量:323
* 专业要求:
计算机相关专业
* 职位描述:
岗位职责:
1、负责设计、开发、维护采集相关的软件产品和模块,开发主要使用语言为Python
2、负责新闻、论坛、社交平台、短视频平台数据采集,包括特定目标和定向网站采集,及海量大规模采集
3、负责所开发采集模块和程序维护及数据异常的跟踪处理
任职要求:
1、大学本科及以上学历,计算机相关专业
2、熟悉Linux开发环境;熟练掌握Python语言
3、熟悉网页抓取原理及技术,熟悉基于Cookie的网站登录原理,熟悉基于正则表达式、Xpath、CSS等网页信息抽取技术
4、响应抓取需求,能快速高效的完成开发任务,具备良好的沟通能力和管理能力
5、具备信息检索、web挖掘等搜索引擎相关知识,有从事海量网络爬虫、网页去重、网页信息抽取经验
6、工作态度踏实、认真、积极主动,能承受一定工作压力,有责任心、有团队协作能力
7、熟悉Xposed框架、App逆向相关技术者优先