数据采集师
¥5~8K/月
九龙坡区-石桥铺
经验不限
今天
-
¥5~8K/月
- 九龙坡区-石桥铺
- 不限
-
数据采集
-
软件
- 大专
- 30以下
- 1人
五险一金
周末双休
朝九晚五
试用期买公积金
通讯补助
生育补贴
专业培训
带薪年假
岗位职责:
工作职责:
1、开发和维护高质量的Python爬虫程序,从各种网站和API中收集所需数据;
2、分析并解决网站反爬虫措施,确保稳定持续的数据获取;
3、设计合适的数据存储方案,确保数据的完整性和安全性;
4、与数据团队合作,进行数据清洗、转换和整合,以支持数据分析和挖掘工作;
5、监测爬虫系统性能,进行优化和调整,以确保高效率和低延迟。
职位要求:
1、扎实的Python编程能力,熟悉异步编程和多线程/多进程技术;
2、深入了解HTTP协议和网页结构,能够进行网页内容解析和数据提取;
3、熟悉常见的爬虫框架,如Scrapy、Beautiful Soup等,并能根据需要进行...
数据采集
¥4~6K/月
九龙坡区-石桥铺
经验不限
昨天
-
¥4~6K/月
- 九龙坡区-石桥铺
- 不限
-
数据采集
-
软件
- 大专
- 30以下
- 1人
岗位职责:
岗位职责:
1.参与分布式网络爬虫系统的研发;
2.参与爬虫核心算法的策略优化研究,充分利用资源,提升网页抓取的效率和质量;
3.参与采集运维平台的优化。
任职要求:
1.熟练使用Python,有良好的编码习惯;
2.熟悉Linux操作系统,熟练使用常用命令;
3.熟悉MySQL、MongoDB之一;
4.熟悉Scrapy、PySpider等主流爬虫框架优先。