职位详情
程序员【6000-15000元】

市中心 经验不限 本科

江苏苏实建筑科技集团有限公司

建筑/建材/工程 丨

职位描述
技术要求：精通Python及Scrapy框架，熟悉反爬机制，如IP代理池、User-Agent轮换、验证码破解；熟悉分布式爬虫架构Scrapy-Redis，能处理千万级数据量；掌握数据清洗与存储技术，包括MySQL、MongoDB、Elasticsearch；了解法律边界，规避《反不正当竞争法》中数据抓取风险。 项目经验要求：有社交平台（微博/抖音）数据抓取经验优先；曾设计动态网页解析方案，如Selenium模拟登录；掌握PyTorch/TensorFlow框架，熟悉BERT、Transformer等NLP模型；能构建用户意图识别模型，区分“真实需求”与“随意咨询”；具备推荐系统开发经验，根据用户行为推荐产品；熟悉特征工程与模型优化，如A/B测试、ROC曲线评估。 职位要求涵盖多方面技术与经验。在技术上，需对Python和Scrapy框架熟练掌握，熟知反爬机制保障数据获取顺利。分布式爬虫架构Scrapy-Redis的运用能力，以及处理大规模数据量的实力也很关键。数据清洗与存储技术的掌握，能确保数据的有效处理与保存。同时要清楚法律边界，避免违规风险。项目经验方面，社交平台数据抓取经验优先，动态网页解析方案设计能力是加分项。在模型与算法领域，掌握相关框架与模型，构建用户意图识别模型以及具备推荐系统开发
工作地址

徐州市云龙区润金城二期33-1-318

应聘步骤
1、请先投递简历
2、投递后致电HR咨询面试事宜
（联系时请说明是在英才网上看到的）
联系方式
魏女士
相似职位
投递简历 返回首页