太原 python jobs (salary & requirements)

熟悉主流爬虫开发框架，具备解决反爬机制的能力以及丰富的爬虫经验的爬虫工程师。作为爬虫工程师，您将负责开发和维护高效稳定的爬虫程序，收集、解析和存储互联网上的开源信息数据，为公司的数据需求提供重要支持。
岗位职责：
1. 负责开发和维护各种开源信息的爬取、解析和存储。
2. 设计和实现爬虫策略，解决反爬机制，确保爬取效率和质量。
3. 参与爬虫算法与策略的研究，优化抓取效果和适应新的网络环境。
4. 与业务团队合作，理解数据需求，提供高质量的数据支持和解决方案。
5. 负责爬虫系统的架构设计、技术选型和性能优化。
6. 跟踪爬虫系统的运行状态，及时发现和解决问题。
7. 不断学习新技术和爬虫开发框架，保持在该领域的技术领先地位。
任职要求：
1.统招本科及以上学历，计算机科学、软件工程、信息技术或相关专业。
2.熟悉常见的网络基础知识，包括HTTP/HTTPS协议、TCP/IP等。
3.熟练使用编程语言，如Python、Java、JavaScript等，以及相应的数据处理工具。
4.熟练掌握主流的爬虫开发框架，如Scrapy、Beautiful Soup等。
5.熟悉Linux基本命令，熟练运用MySQL、Redis等数据库操作。
6.具备解决反爬机制的能力，熟悉常见的反爬手段和对策。
7.了解不同端的抓包分析方法，具备基本的JS或移动端逆向能力。
8.具备数据处理和数据清洗经验，能够确保获取的数据质量。
9.能独立解决实际开发过程中遇到的各类问题。
10.具备良好的英语能力者优先，能够阅读相关技术文档和论文。
11.良好的沟通能力和团队合作精神，能够与不同团队紧密协作。
12.有开发过车险、非车险 或者保险SaaS系统开发经验的优先
13.有开发过代驾系统、救援系统及其余和车辆后市场有关的系统优先