登录

求职者登录 企业登录

| 注册

求职者注册 企业注册

首页>所有职位>软件工程师>amazon爬虫工程师

厦门水葫芦网络科技有限公司

amazon爬虫工程师

请用微信扫描分享

万小姐

薪资: ¥10000-15000元/月

福利:
  • 五险

要求: 学历不限 | 2年 | 语言不限 | 年龄不限

地址: 厦门市-思明区(福建省厦门市思明区软件园二期望海路63号楼之二902C)导航

人数: 招聘2人

时间: 5天/周

电话: 企业未公开,请通过597直聘投递简历
和TA聊聊投个简历

公司简介

我们是多年外贸从业者,我们为跨境电商的未来而努力。
工作内容:
1、使用Python开发爬虫,完成模拟登陆、定向抓取、全网抓取等任务;
2、负责网络爬虫的更新及维护;
3、负责为各个业务线提供垂直,精准的数据采集,抽取,存储服务;

职位要求:
1、熟悉多线程、多进程、网络通信编程相关知识;
2、2年以上网页爬虫开发经验, 熟悉JS,ajax,网页消重;
3、对网站的反爬虫策略有一定的研究,能够总结分析不同网站,网页的结构特点及规律;
4、精通网页抓取原理及技术,精通正则表达式,从结构化的和非结构化的数据中获取信息;
5、熟悉python编程、scrapy爬虫框架和selenium自动化测试框架及phantom JS熟悉linux环境,熟练掌握http/tcp相关实践知识,有过前端或后端(接口)开发经验;
6、熟悉Java语言或PHP语言编程,对数据结构和算法设计有较为深刻的理解;
7、熟悉第三方征信数据接口者优先;
8、有运营商模拟登陆、征信数据抓取经验者优先;
9.熟悉各种消息队列、数据库、服务器如redis, rabbitMQ, mysql, mongodb,熟悉爬虫相关库如requests, lxml, pyquery等;
10.有爬虫、信息抽取、文本分析等相关经验,熟悉爬虫的架构与流程,熟悉第三方爬虫库如scrapy, pyspider等,或者自己实现过;
11.了解爬虫的架构分层和模块化、服务化;
加分项:
1. 大规模分布式爬虫系统经验,开放式爬虫系统经验;
2. 有golang语言相关开发经验。

公司地图

福建省厦门市思明区软件园二期望海路63号楼之二902C

  • 地图
  • 街景
交通路线&生活信息
起点 终点

更新于:2018-03-19

厦门水葫芦网络科技有限公司

厦门水葫芦网络科技有限公司

我们是多年外贸从业者,我们为跨境电商的未来而努力。
  • 行业互联网
  • 性质民营、私营公司
  • 规模50~200人
  • 网址
手机版m.597.com
微信公众号
求职者app下载
400-8108-597
电话
意见
反馈
App
下载
可以选择以下附件一并投递,投递不可撤回