蒙城华人网
标题: 高级爬虫工程师 [打印本页]
作者: luyaoluyao 时间: 2016-1-14 11:21
标题: 高级爬虫工程师
高级爬虫工程师
岗位职责:
1.对指定的多个网站的网页进行网页抓取、数据的提取、清洗、入库
2.对匹配、同步等后台守护程序进行性能优化等
3.负责特殊网页采集任务的分析及采集方案设计
岗位要求:
1.两年以上JAVA开发经验, 熟悉多线程、多进程、网络通信编程相关知识
2.精通网页抓取原理及技术,精通正则表达式,从结构化的和非结构化的数据中获取信息
3.能够总结分析不同网站,网页的结构特点及规律;
4.有分布式爬虫架构经验优先;
5.有新闻/垂直领域爬虫开发经验优先。
" S. R! X" l$ B1 E' U, m
% _$ b* K3 N; d. @; n5 W8 y3 M
欢迎光临 蒙城华人网 (https://www.sinoquebec.com/) |
Powered by Discuz! X3.1 |