急招2名 - 爬蟲工程師

薪資待遇：30K-55K（不含項目獎金，能力優異者面談）

上班時間：10休4 （12:00-24:00 有2小時休息，吃飯時間）

試用期：1個月

公司項目：IM開發經驗

工作地點：先遠程後到崗（泰國/曼谷 居家辦公）

1.負責重點業務方向的網頁數據抓取開發與維護

2.設計並優化穩定高效的爬蟲程序，處理反爬策略（如驗證碼、JS混淆、IP封鎖等）

3.搭建並維護分佈式爬蟲系統，實現大規模並發數據採集

4.對採集到的數據進行清洗、去重、結構化處理，保證數據質量

5.監控系統運行狀態，及時處理異常，提升數據獲取效率與穩定性

6.協助數據團隊完成數據整合和標籤提取工作

1. 本科及以上学历，计算机、软件工程或相關專業，2-3年及以上實際爬蟲開發經驗

2. 精通 Python，熟悉 Scrapy、Requests、Selenium、Playwright 等主流爬蟲框架

3. 掌握 HTML / XPath / CSS Selector / 正則表達式等頁面解析技術

4. 熟悉常見反爬機制及其應對策略，如代理池、UA池、驗證碼識別、JS解密、動態加載頁面等

5. 有 Redis、MongoDB、MySQL 等數據存儲使用經驗

6. 熟悉多線程/異步編程，具備良好的代碼結構和開發習慣

7. 有一定的 Linux 操作能力，能夠獨立部署和維護採集腳本

8. 有責任心，邏輯清晰，抗壓能力強，有良好的團隊合作精神

️️優先條件:

1. 有 Scrapy-Redis 分佈式爬蟲項目經驗

2. 熟悉 Kafka/Celery 等異步任務框架

3. 有處理圖像驗證碼或滑動驗證碼經驗者優先

4. 熟悉常用反作弊策略及應對方案

5. 有色站爬蟲項目經驗