职位描述
1.协助算法团队推进社科大模型在多学科领域中的数据流程开发工作。
2.联动人文社科领域专家及产品人员，推动考古学、历史学、古籍与古文字、历史地理等方向Agent应用的构建与落地。

职位要求
1.具备两年以上爬虫开发经验，能独立承担中小型爬虫项目的技术实施，涵盖需求梳理、方案制定与编码实现。
2.精通Python爬虫技术，可根据网页结构差异和反爬机制灵活选用采集策略与工具，如正则表达式提取、XPath解析等方法。
3.可搭建并维护基础代理池、User-Agent池，具备应对常见反爬手段的能力，有效解决访问限制问题。
4.掌握数据库基本操作，可将采集数据准确写入数据库，并完成基础的数据查询与处理任务。
5.编码规范清晰，具备代码优化与审查能力，能够对初级开发成员提供技术支持与指导。

加分项：
1.掌握K8S、Docker的配置与运维操作。
2.了解前端框架，具备Web开发实践经验。
3.具有RAG、Multi-Agent等大模型应用场景的开发背景。
4.熟悉pytorch、onnx、tensorflow等主流框架，可调用常用算法模型进行推理执行。