薪资:
¥10000-15000元/月
福利:
要求:
学历不限 | 2年 | 语言不限 | 年龄不限
地址:
厦门市-思明区(福建省厦门市思明区软件园二期望海路63号楼之二902C)导航
人数:
招聘2人
时间:
5天/周
公司简介
我们是多年外贸从业者,我们为跨境电商的未来而努力。
工作内容:
1、使用Python开发爬虫,完成模拟登陆、定向抓取、全网抓取等任务;
2、负责网络爬虫的更新及维护;
3、负责为各个业务线提供垂直,精准的数据采集,抽取,存储服务;
职位要求:
1、熟悉多线程、多进程、网络通信编程相关知识;
2、2年以上网页爬虫开发经验, 熟悉JS,ajax,网页消重;
3、对网站的反爬虫策略有一定的研究,能够总结分析不同网站,网页的结构特点及规律;
4、精通网页抓取原理及技术,精通正则表达式,从结构化的和非结构化的数据中获取信息;
5、熟悉python编程、scrapy爬虫框架和selenium自动化测试框架及phantom JS熟悉linux环境,熟练掌握http/tcp相关实践知识,有过前端或后端(接口)开发经验;
6、熟悉Java语言或PHP语言编程,对数据结构和算法设计有较为深刻的理解;
7、熟悉第三方征信数据接口者优先;
8、有运营商模拟登陆、征信数据抓取经验者优先;
9.熟悉各种消息队列、数据库、服务器如redis, rabbitMQ, mysql, mongodb,熟悉爬虫相关库如requests, lxml, pyquery等;
10.有爬虫、信息抽取、文本分析等相关经验,熟悉爬虫的架构与流程,熟悉第三方爬虫库如scrapy, pyspider等,或者自己实现过;
11.了解爬虫的架构分层和模块化、服务化;
加分项:
1. 大规模分布式爬虫系统经验,开放式爬虫系统经验;
2. 有golang语言相关开发经验。
公司地图
福建省厦门市思明区软件园二期望海路63号楼之二902C
更新于:2018-03-19
-
行业互联网
-
性质民营、私营公司
-
规模50~200人
-
网址
加入职场圈子
×防诈骗提示
597直聘提示您:用人单位以任何名义向应聘者收取费用都属违法行为
(如押金、资料费、代收体检费、代收淘宝信誉等),请提高警惕并注意保护个人信息!
- 手机版m.597.com
- 微信公众号
- 求职者app下载
400-8108-597
电话
意见
反馈
App
下载