مهندس داده(Mid-Data-Engineer)
توضیحات موقعیت شغلی
طراحی، ساخت و نگهداری پایپلاینهای دادهی قابل اتکا و مقیاسپذیر برای انتقال دادهها به Data Warehouse یا پلتفرمهای مدرن داده.
همکاری در فرآیند مهاجرت داده و سوییچ کردن از زیرساختهای قدیمی به معماری جدید.
پشتیبانی و نگهداری از زیرساختهای فعلی.
طراحی و پیادهسازی مدلهای دادهای (Star Schema, Snowflake و…) متناسب با نیازهای کسبوکار.
بررسی و بهینهسازی کوئریها و جابهای پردازشی جهت بهبود پرفورمنس و مدیریت منابع.
پیادهسازی مکانیزمهای مانیتورینگ و تست خودکار برای اطمینان از صحت، دقت و یکپارچگی دادهها.
همکاری نزدیک با تیمهای Data Analysis و Data Science برای درک نیازمندیهای دادهای و حل چالشهای زیرساختی.
تهیه مستندات فنی دقیق.
نیازمندی ها
تسلط کامل به Python.
تسلط عمیق بر SQL و تجربه کار با دیتابیسهای رابطهای.
آشنایی با مفاهیم و معماریهای مدرن داده مانند Data Lakehouse.
تجربه عملی کار با ابزارهای پردازش دادههای حجیم مانند pyspark، dask یا polars.
تجربه کار با ابزارهای مدیریت گردش کار مانند Apache Airflow.
تسلط بر محیط Linux و دستورات Bash.
آشنایی با دیتابیسهای NoSQL و دیتابیسهای ستونی/تحلیلی مانند ClickHouse.
تسلط بر Git و مفاهیم Version Control.
آشنایی با موارد زیر مزیت محسوب میشود:
تسلط به Oracle Data Integrator (ODI) و PL/SQL
تجربه ادمینستریشن یا نگهداری از سرویسهای OBIEE یا WebLogic.
ارسال درخواست
در صورتیکه به این جایگاه شغلی علاقهمند هستید میتوانید اطلاعات خود را برای ما ارسال کنید؛ برای این کار از اینجا شروع کنید.