上海飞驼数智航运科技有限公司 python开发工程师 薪资：3K-5K/月 工作地点：大连市 学历：本科及以上 发布时间：2024年12月17日 职位描述 岗位职责：

岗位描述：

1.负责开发网络爬虫，完成数据采集与爬取、解析处理、入库等数据日常工作；

2.配合数据的清洗、整理、去重及合并等工作；

3.设计爬虫策略和防屏蔽规则，提升网页爬取的效率和质量；

4.能独立解决实际开发过程中遇到的各类问题。

岗位要求：

岗位要求：

1.计算机或者IT相关专业，本科及以上学历；

2. 熟悉HTML/JavaScript/CSS/xpath/url/Ajax/xml等web技术知识，熟悉主流web反爬技术，熟悉JS防护、混淆、逆向分析等技能，具备较好的前端分析技能，具备实际爬虫分析能力与功关能力；

3.熟悉Linux系统，熟悉mysql、redis、nosql，MongoDB等，熟悉Internet基本协议（如TCP/IP、HTTP等）；

4.能够解决封账号、封IP采集等问题，解决网页抓取、信息抽取等问题，构建完善的网络信息收集平台；

5.熟悉常用的自动化开发工具，例如: selenium、jsoup、WebDriver等；

6.熟悉防破解、防逆向、加固技术；

7.有分布式爬虫架构经验、数据分析与挖掘相关者优先。

投递说明：

其他要求：

本科大三、大四在校生，周一至周五可实习。
最少实习时长6个月以上，表现优秀者有正式录用计划。

单位简介 上海飞驼数智航运科技有限公司是一家专注于跨国贸易信息平台数据跟踪科技型企业。公司以上海为总部，在大连建立研发基地，拥有一支专业技术队伍。公司愿为国际物流供应链企业提供供应链可视化&控制塔服务，让供应链变简单！ 上海飞驼数智航运科技有限公司 领域：信息传输、软件和信息技术服务业 规模：少于50人 地址：上海市静安区江场三路238号1601J室