海南菲利人力资源有限公司
工作開放國家:全球
語言要求:簡體中文
分散式團隊, 社區服務, 異步, 內部預算, 無監控系統
急招2名 - 爬蟲工程師
薪資待遇:30K-55K(不含項目獎金,能力優異者面談)
上班時間:10休4 (12:00-24:00 有2小時休息,吃飯時間)
試用期:1個月
公司項目:IM開發經驗
工作地點:先遠程後到崗(泰國/曼谷 居家辦公)
1.負責重點業務方向的網頁數據抓取開發與維護
2.設計並優化穩定高效的爬蟲程序,處理反爬策略(如驗證碼、JS混淆、IP封鎖等)
3.搭建並維護分佈式爬蟲系統,實現大規模並發數據採集
4.對採集到的數據進行清洗、去重、結構化處理,保證數據質量
5.監控系統運行狀態,及時處理異常,提升數據獲取效率與穩定性
6.協助數據團隊完成數據整合和標籤提取工作
1. 本科及以上学历,计算机、软件工程或相關專業,2-3年及以上實際爬蟲開發經驗
2. 精通 Python,熟悉 Scrapy、Requests、Selenium、Playwright 等主流爬蟲框架
3. 掌握 HTML / XPath / CSS Selector / 正則表達式等頁面解析技術
4. 熟悉常見反爬機制及其應對策略,如代理池、UA池、驗證碼識別、JS解密、動態加載頁面等
5. 有 Redis、MongoDB、MySQL 等數據存儲使用經驗
6. 熟悉多線程/異步編程,具備良好的代碼結構和開發習慣
7. 有一定的 Linux 操作能力,能夠獨立部署和維護採集腳本
8. 有責任心,邏輯清晰,抗壓能力強,有良好的團隊合作精神
️️優先條件:
1. 有 Scrapy-Redis 分佈式爬蟲項目經驗
2. 熟悉 Kafka/Celery 等異步任務框架
3. 有處理圖像驗證碼或滑動驗證碼經驗者優先
4. 熟悉常用反作弊策略及應對方案
5. 有色站爬蟲項目經驗
shenna zhang
Recruiter海南菲利人力资源有限公司
今天回覆 2 次
發布於 28 June 2025
C# 開發工程師
海南菲利人力资源有限公司
$4-7K[月薪]
远程办公3 - 5 年經驗學歷不限全職
shenna zhangRecruiter
智能合約開發
TrendX
$4-6K[月薪]
远程办公5 - 10 年經驗本科全職
Zhang GavinHR总监
PHP 開發人員
97EX
$4.2-7K[月薪]
远程办公3 - 5 年經驗學歷不限全職
lee Dora人力資源經理
區塊鏈開發人員
AlertOps
$400-600[月薪]
远程办公1-3 年經驗本科契約工
Torrealba JeansHR Manager
後端開發人員
Opinion Lab
$4-7K[月薪]
远程办公5 - 10 年經驗本科全職
X Opinion人力資源總監