ההדף הראשון
פיתוח תוכנה

מפתח/ת Web Scraping ואוטומציה: שכר וכישורים

מה מקובל לבקש במשרת מפתח/ת Web Scraping ואוטומציה, ואילו כישורים ומערכות מופיעים ברוב המשרות בתחום.

טווח שכר חודשי מקובל

16,000–27,000 ₪

הטווח משתנה לפי ותק, גודל הארגון והאזור בארץ. בראיון נוקבים בטווח ולא במספר יחיד.

מה מעלה את השכר בתפקיד

  • Python עם Scrapy/BeautifulSoup
  • אוטומציית דפדפן (Playwright/Selenium)
  • עקיפת מנגנוני anti-bot
  • ניהול proxies ו-rotating IPs
  • עיבוד וניקוי נתונים

מערכות שמופיעות במשרות

  • Scrapy
  • Playwright
  • Proxy pools
  • Airflow
  • PostgreSQL

הישגים ששווים משא ומתן

  • בניית מערכת שאוספת נתונים מ-500 אתרים שונים מדי יום ללא התערבות ידנית
  • הקטנת אחוז כשלי scraping מ-18% ל-3% דרך שיפור ניהול proxies
  • פיתוח מנגנון זיהוי אוטומטי לשינוי מבנה HTML שחסך שעות תיקון שבועיות
  • עיבוד והצלבה של 5 מיליון רשומות מחיר ביום

מקצועות קרובים