Back to search
Elad Software Systems Linkedin · Posted 28d ago

Data engineer

Sdot Dan Regional Council

Linkedin
Continue to application Add your email once, then Caio opens the original posting.

Indexed description

תיאור ודרישות משרה

תיאור משרה:

דרוש Data engineer להשתלבות בעבודת הצוות ופרויקטים בתחום ה AI . אחריות לקליטה של כמויות גדולות של נתונים חדשים ולאחר מכן להבנה מעמיקה ובחינה של נתונים בשיתוף פעולה הדוק עם Data scientist. עיצוב ופיתוח של תהליכי דאטה קריטיים, מגוונים וגדולים – גם בסביבות ענן וגם ב on prem

דרישות:

ניסיון של לפחות 3 שנים כ Data engineer – חובה

ניסיון של 3 שנים של עבודה עם שפות Object-Oriented Programming (OOP)

ניסיון של 3 שנים עם Python – חובה

ניסיון מעשי עם Spark עבור Large scale data – חובה

ניסיון מעשי של שנתיים לפחות ב AWS עם services של Athena/Glue/StepFunction/EMR/Redshift/RDS – יתרון משמעותי

הבנה עמוקה בתחום של עיצוב, פיתוח ואופטימיזציה של פתרונות מורכבים שמעבירים או מעבדים כמויות גדולות של נתונים

הבנות של טכניקות של אופטימיזציה ועבודה עם partitions של סוגים שונים של דאטה כמו parquet, Avro, hdf5, delta lake

ניסיון בתפיסה ועבודה עם docker, Linux, CI/CD tools, Kubernetes

ניסיון של כלי data pipelines כמו airflow, Kubeflow

תואר במדעי המחשב. הנדסה .מתמטיקה או סטטיסטיקה – חובה

הבנה של מושגים ותהליכים בתחום machine learning

  • הפניה מיועדת לנשים וגברים כאחד
  • רק פניות מתאימות יענו
Free. 20 seconds. No password. See every match in this search.

Create a free Caio profile to unlock more results and save your role and location preferences.

Unlock free search
Want help applying to roles like this? Search Caio for free. If repetitive applications get heavy, Managed Job Search adds supervised execution for $99/month.
View Managed Job Search