薪资：10-15K 地点：广州天河/6号线高塘石站 ✅ 职位描述 1、主爬虫工作（60%），以数据技术组组长作为培养未来发展方向，因为需要同时具备一定的数据分析、数据挖掘、AIGC应用相关能力，未来发展画像为综合型数据技术应用专家或数据团队管理者，仅专注爬虫发展的人才勿扰。 2、负责各类相关网站爬虫开发工作及采集方案设计，能够胜任所有主流招聘平台的采集工作； 3、研究各种网站、链接的形态，优化爬虫策略，解决技术疑难问题，包括反反爬、验证码识别、js加密破解等，提升网页抓取的效率和数据质量； 4、参与爬虫后数据处理、数据加工、数据挖掘/分析、AIGC应用等流程相关研发工作，有机串通数据整体应用路径。 5、负责构建维护公司数据资产体系。 ✅ 职位要求 1、要求本科及以上学历，至少两年以上工作经验，计算机、大数据相关专业。 2、精通Python、计算机网络，熟练使用多线程/多进程，熟悉Scrapy等常用爬虫框架； 3、熟悉Linux操作，熟悉MySQL、MongoDB等常用数据库，了解各种Web前端技术； 4、熟练反爬破解操作，能够解决封账号、封IP、验证码识别、图像识别等问题； 5、具备较为全面的综合数据工程能力，深化爬虫技术的同时，具备数据工程横向其他数据能力； 6、具备优秀的学习能力，能独立分析和解决问题，具有较强的沟通技巧和团队协