5 ساعت پیش | کد آگهی: 10624412
دسته‌بندی شغلی
موقعیت مکانی
تحصیلات
-
محل فعالیت
-
مزایا
-
مهارت ها و زبان ها
نوع همکاری
سایر اطلاعات
شرح شغل و وظایف طراحی توسعه و بهینه سازی پایپ لاین های پردازش داده با استفاده از PySpark برای داده های حجیم و متنوع پیاده سازی و آماده سازی فرآیندهای ETL ELT جهت استخراج تبدیل و بارگذاری داده از منابع مختلف همکاری با تیم های Big Data و Data Science برای مدل سازی داده های تحلیلی و ایجاد مدل های داده مناسب توسعه الگوریتم ها و ماژول های پردازشی داده با استفاده از PySpark و Python کار با فرمت های داده ای مختلف مانند Avro JSON CSV و Parquet استفاده از کتابخانه هایی مانند pandas numpy و pyarrow در پردازش داده کار با Dataset و RDD و DataFrame در Spark مشارکت در توسعه و نگهداری سیستم های نرم افزاری و مستندسازی کدها الزامات تسلط به زبان Python و تجربه توسعه در پروژه های ماژولار و چندلایه توانایی طراحی معماری نرم افزار و پایپ لاین های داده ای تسلط به Docker تسلط به طراحی و استفاده از APIها حداقل 1 سال سابقه برنامه نویسی با Python آشنا با Git و Ubuntu مزیت محسوب می شود آشنایی با PySpark و مفاهیم مهندسی داده تجربه کار با pandas numpy pyarrow تجربه کار با RDD و DataFrame در Spark آشنایی با فرآیندهای ETL و داده های حجیم تجربه کار با پایگاه داده های SQL یا NoSQL تجربه کار با HDFS و سیستم های ذخیره سازی داده توزیع شده آشنایی با بروکرهای پیام Kafka RabbitMQ و تجربه کار در محیط های Agile تهران تهران آزادی تمام وقت فن آوران هوشمند دانش پژوه کارشناس جنسیت تفاوتی ندارد فناوری اطلاعات نرم افزار و سخت افزار
جویا کار این آگهی را از سایت
جاب‌ویژن
استخراج نموده است و هیچ مسئولیتی در قبال این آگهی ندارد.
دقت نمایید که کارفرما حق دریافت هیچ گونه وجهی از کارجو را نداشته و این امر خلاف قانون است. در صورت مشاهده این موارد یا سایر تخلفات با کلیک روی (گزارش آگهی) ما را در ارائه خدمات بهتر یاری نمایید.
در غیر این صورت میتوانید با کلیک بر روی دکمه "درج نظر" نظر خود را در مورد این آگهی ثبت کنید.
جهت اشتراک در شبکه های اجتماعی روی کلیدهای زیر کلیک کنید
همچنین میتوانید لینک کوتاه زیر را جهت دسترسی به صفحه فوق برای اشتراک گذاری کپی کنید
کپی کردن لینک
نظرات