招聘中

Python爬虫+数据处理

6-12K/月

广州市 1-3年大专

立即投递感兴趣

立即沟通

企业基本信息

公司规模1 - 49人
公司性质私营企业
所属行业电力其它类
所在地区广州市
工作地址广州市天河区白沙水路123号长兴创兴港自编5栋

联系人

联系人-
手机会员登录后才可查看
邮箱会员登录后才可查看
邮政编码-

查看所有职位

相似职位更多相似职位

查看全部职位

职位 boss 描述

岗位职责：1、负责基于Python开发、维护网络爬虫程序，完成多渠道公开数据的合规采集、抓取、更新与迭代，保障数据采集稳定、高效、不间断运行；
2、对原始采集数据进行清洗、去重、规整、分类、结构化处理，修复脏数据、缺失数据，输出标准化可用数据集；
3、熟悉常见反爬机制，可独立解决IP限制、动态加载、验证码、接口加密等各类反爬问题，优化爬虫策略与抓取效率；
4、负责数据入库、整理、统计汇总，按需输出数据报表、分析台账，支撑部门业务分析、项目咨询、数据复盘工作；
5、负责爬虫脚本日常运维、BUG修复、版本优化，持续提升采集稳定性、并发能力与数据准确率；
6、配合部门业务需求，定制化开发采集方案、自动化处理脚本，沉淀可复用的数据处理工具；
7、整理技术文档、数据说明文档，做好数据归档、版本留存，配合团队完成各项数据支撑工作。

任职资格：1、熟练掌握Python核心编程，精通爬虫相关技术，熟练使用Requests、Scrapy、Selenium、Playwright、Xpath、BeautifulSoup等主流爬虫工具与库；
2、具备扎实的数据处理能力，熟练使用Pandas、Numpy进行数据清洗、规整、统计分析，能独立处理大批量杂乱原始数据；
3、熟悉网页结构、接口抓包、异步加载、AJAX数据抓取，掌握基础代理池、IP轮换、验证码破解等反爬应对方案；
4、熟悉MySQL、MongoDB等常用数据库，能够完成数据存储、入库、查询、更新与数据管理；
5、具备独立开发完整爬虫项目经验，能独立排查问题、优化程序性能，保证数据采集稳定输出；
6、逻辑清晰、细心严谨，具备良好的数据敏感度，能按需匹配业务需求输出精准数据成果；
7、态度踏实稳定，执行力强，能配合部门工作节奏，接受短期业务迭代与需求调整。

薪酬福利：入职即享五险一金；商业保险，法定节假日、带薪假期、年度体检等全方位关怀。