مهندس داده

توضیحات آگهی

شرح شغل و وظایف اگر می توانید در مهسان به عنوان مهندس داده به ما در طراحی و بهینه سازی سامانه های داده ای مقیاس پذیر با استفاده از ابزارهای مناسب و در پیاده سازی آن ها کمک کنید این موقعیت شغلی برای شما مناسب است برای موفقیت در این نقش انتظار داریم مهارت های زیر را داشته باشید گردآوری و استخراج داده های مورد نیاز از منابع مختلف شامل پایگاه های داده رابطه ای و غیررابطه ای REST API فایل ها و شناسایی و اصلاح خطاها رفع ناسازگاری ها و نواقص در مجموعه داده ها پیاده سازی قواعد کیفیت داده Data Validation Data Cleaning یکپارچه سازی داده ها و آماده سازی برای تحلیل ایجاد لاگ و مانیتورینگ برای داده ها سازماندهی و ساختاردهی داده ها مانند داده های کمی کیفی متون تصاویر ویدیوها طراحی و توسعه برنامه های اتوماسیون و APIهای RESTful بر اساس فرآیندهای تیم و نیازهای تجاری تضمین کیفیت قابلیت اطمینان و مشاهده پذیری داده ها از طریق سیستم های نظارت و اعتبارسنجی پیاده سازی معماری های داده جریانی با استفاده از Kafka Spark یا ابزارهای مشابه مدیریت و بهینه سازی انبار داده Lakehouse مانند Iceberg Databricks مستندسازی شفاف فرآیندها چالش ها و یافته ها استقرار نظارت و نگهداری پلتفرم در Kubernetes با استفاده از Helm chart و GitLab CI CD تحقیق و ارزیابی فناوری ها و ابزارهای جدید برای بهبود پلتفرم و فرآیندهای مهندسی داده ساخت و مدیریت مدل های داده انبارهای داده و دریاچه های داده با استفاده از فناوری های مدرن پیاده سازی چارچوب های کنترل کیفیت داده نظارت و مدیریت مهارت های نرم توانایی تحلیل و حل مسئله پیچیده دقت بالا و توجه ویژه به جزئیات علاقه به یادگیری تکنولوژی های جدید و داده های نوین تفکر سیستمی و دید استراتژیک در طراحی سیستم های داده ای ارتباطات موثر و روحیه همکاری پویا با سایر اعضای تیم تفکر تحلیلی و بررسی چندجانبه در مواجهه با چالش ها مسئولیت پذیری و تعهد در انجام وظایف محول شده افزون بر این داشتن مهارت های زیر اولویت جذب شما را بیشتر می کند آشنایی با امنیت داده ها و مدیریت اطلاعات حساس تضمین امنیت داده ها و انطباق با استانداردهای سازمانی معماری طراحی و پیاده سازی یک پلتفرم مهندسی داده با استفاده از Apache Airflow Apache Spark Apache Kafka ClickHouse S3 object storage و data lakehouse همکاری با دانشمندان داده تحلیلگران داده و سایر ذینفعان برای درک نیازهای داده و ارائه راه حل های داده همکاری با تحلیلگران و توسعه دهندگان نرم افزار برای برآورده کردن نیازهای داده دانش عمیق در مدل سازی داده تجربه عملی با ابزارها و پلتفرم های مدرن مهندسی داده از جمله زمان بندی و اتوماسیون Apache Airflow Apache NiFi Knime تجربه عملی با پایگاه های داده SQL NoSQL PostgreSQL ElasticSearch و مهارت های برنامه نویسی قوی در Python و Java تجربه عملی در ساخت Data Pipeline و Data Warehouse تجربه کار با داده های حجیم و سیستم های توزیع شده تهران تهران مطهری تمام وقت مهسان کارشناس جنسیت تفاوتی ندارد فناوری اطلاعات نرم افزار و سخت افزار