Acil olarak 2 kişi - Web Kazıyıcı Mühendisi

Maaş: 30K-55K (proje ikramiyesi hariç, yetenekli olanlarla mülakat yapılacaktır)

Çalışma saatleri: 10 gün çalışıp 4 gün tatil (12:00-24:00, 2 saat mola, yemek süresi)

Deneme süresi: 1 ay

Şirket projesi: IM geliştirme deneyimi

Çalışma yeri: Önce uzaktan sonra ofiste (Tayland/Bangkok, evden çalışma)

1. Önemli iş alanlarının web verisi kazıma geliştirme ve bakımını üstlenmek

2. Stabil ve verimli web kazıyıcı programları tasarlayıp optimize etmek, karşı web kazıma stratejilerini (örneğin, captcha, JS karıştırma, IP engelleme vb.) ele almak

3. Dağıtık web kazıyıcı sistemleri kurmak ve bakımını yapmak, büyük ölçekli eş zamanlı veri toplama sağlamak

4. Toplanan verileri temizlemek, tekrarları gidermek, yapılandırılmış hale getirmek, veri kalitesini sağlamak

5. Sistem çalışma durumunu izlemek, anormallikleri zamanında ele almak, veri elde etme verimliliği ve istikrarını artırmak

6. Veri ekibine veri entegrasyonu ve etiket çıkarma çalışmalarında yardımcı olmak

1. Lisans veya üzeri bir derece, bilgisayar, yazılım mühendisliği veya ilgili bir alanda 2-3 yıl ve üzeri gerçek tarayıcı geliştirme deneyimi

2. Python'a hâkim, Scrapy, Requests, Selenium, Playwright gibi popüler tarayıcı çerçevelerine aşina

3. HTML / XPath / CSS Seçici / Düzenli İfadeler gibi sayfa analiz tekniklerine hâkim

4. Yaygın anti-taramacılık mekanizmaları ve bunlara karşı stratejileri hakkında bilgi sahibi, örneğin proxy havuzları, UA havuzları, CAPTCHA tanıma, JS şifre çözme, dinamik yükleme sayfaları vb.

5. Redis, MongoDB, MySQL gibi veri depolama teknolojileri konusunda deneyim sahibi

6. Çoklu iş parçacığı/asenkron programlama konularında bilgi sahibi, iyi bir kod yapısı ve geliştirme alışkanlıklarına sahip

7. Belirli bir düzeyde Linux işletim sistemi bilgisi, toplama betiklerini bağımsız olarak dağıtma ve bakımını yapabilme yeteneği

8. Sorumluluk sahibi, mantıklı düşünme becerisine sahip, stres altında çalışabilen, iyi bir takım ruhuna sahip

️️Tercih edilen koşullar:

1. Scrapy-Redis dağıtık tarayıcı proje deneyimi

2. Kafka/Celery gibi asenkron görev çerçevelerine aşina

3. Görüntü CAPTCHA veya kaydırmalı CAPTCHA ile ilgili deneyimi olanlar tercih edilir

4. Yaygın dolandırıcılıkla mücadele stratejileri ve yanıt planları hakkında bilgi sahibi

5. Erotik sitelerde tarayıcı proje deneyimi