越秀区-高级爬虫工程师 月薪过万+五险一金+带薪年假等福利,广州众成大数据科技有限公司招聘啦!

广州众成大数据科技有限公司

公司简介：

广州众成大数据科技有限公司（原广州众成医疗器械产业发展有限公司），是国内知名的医疗器械行业大数据及产业互联网企业。
专业的服务能力：公司聚焦医疗器械产业研究，先后为广药集团、羊城大健康集团、华润集团提供产业咨询服务以及为上海、广州、深圳、南京、重庆、南昌等区域及产业园区提供产业规划服务。

招聘信息：

招聘岗位：
高级爬虫工程师  月薪1.5万-3万

岗位职责：

• 负责对多平台数据源（WEB/APP/H5/小程序/公众号等）进行爬虫设计、开发与维护，以及相应信息的抽取、清洗、消重、匹配和结构化处理，保证数据质量与采集效率

• 攻克解决各类反爬问题，如JS 混淆逆向、字体加密、验证码等

• 有效地与业务、一线人员、产品经理进行沟通，进行迭代开发

• 负责参与设计分布式爬虫系统，爬虫管理平台，参与爬虫系统存储，传输，调度，监控的设计与研发

• 负责带领爬虫团队高效的完成指定需求任务

任职资格：

• 3年以上大规模网页爬虫经验，2年以上Python开发经验，掌握多线程/协程编程，熟练使用过一种以上Python后端框架

• 熟悉Linux平台，熟练掌握shell多线程编程

• 熟练掌握爬虫底层框架，例如scrapy、scrapy-redis、feapder、pyspider，熟悉爬虫系统、分布式爬虫设计原理

• 熟悉Fiddler, Charles, Wireshark、Mitmproxy、HTTP debugger、BurpSuite, TCPDump等网络协议分析工具

• 熟悉TCP/IP，HTTP/HTTPS等相关网络协议，以及数据抓包、分析

• 精通web hook技术、内存漫游等调式方式

• 精通JavaScript逆向，能够快速处理常见的反爬虫，熟悉常用的应对方案，可以应对一二线反爬虫产品

• 熟练使用MySQL、MongoDB、redis等，了解infludb

• 熟悉ClickHouse、hadoop生态圈、Hive、Elasticsearch、kafka、RabbitMQ等大数据相关技术；

加分项：

• 熟练App抓取方案

• 熟悉Xposed、frida框架和熟练常见移动端Hook技术，有Xposed模块编写经验

• 掌握Android逆向静态分析、动态调试, 掌握Apktool、dex2jar、JD-GUI、IDA, JEB等工具

• 熟悉AST语法树

联系方式：

请投简历到电子邮件：zcyl@joinchain.cn
邮件的标题请注明：应聘岗位+姓名+来源微信公众号“广州市招聘”

工作地址：越秀区东风东路745号紫园商务大厦512-513