5 ساعت پیش | کد آگهی: 12388324
دستهبندی شغلی
موقعیت مکانی
تحصیلات
-
محل فعالیت
مزایا
-
مهارت ها و زبان ها
نوع همکاری
سایر اطلاعات
1 هدف و ماموریت شغل طراحی توسعه و نگهداری خطوط انتقال و پردازش داده با هدف جمع آوری استخراج پاک سازی استانداردسازی ذخیره سازی و آماده سازی داده ها از منابع مختلف این شغل با بهره گیری از ابزارها و فناوری های مهندسی داده مسئولیت تضمین کیفیت یکپارچگی به روز بودن و دسترس پذیری داده ها و ایجاد زیرساخت های قابل اتکا برای پردازش و تحلیل داده را بر عهده دارد 2 شرح وظایف و مسئولیت ها طراحی توسعه و پیاده سازی فرآیندهای استخراج تبدیل و بارگذاری داده ETL ELT از منابع اطلاعاتی مختلف توسعه و نگهداری خطوط انتقال داده Data Pipelines به منظور جمع آوری و انتقال داده ها میان سامانه ها و پایگاه های داده برقراری ارتباط با منابع داده از طریق رابط های برنامه نویسی API و توسعه فرآیندهای دریافت اطلاعات طراحی و توسعه خزنده های وب به منظور استخراج و جمع آوری اطلاعات از منابع اینترنتی استخراج و پردازش اطلاعات از اسناد و فایل های PDF و سایر منابع داده ساختاریافته و نیمه ساختاریافته پاک سازی استانداردسازی و یکپارچه سازی داده های فارسی و چندزبانه و شناسایی و حذف داده های تکراری طراحی و بهینه سازی مدل های ذخیره سازی داده متناسب با نیازمندی های سامانه ها توسعه و مدیریت فرآیندهای ورود و ذخیره سازی داده در پایگاه داده Elasticsearch پایش مستمر خطوط انتقال داده شناسایی خطاها و پیاده سازی سازوکارهای مدیریت و بازیابی خطا بهینه سازی عملکرد فرآیندهای پردازش و انتقال داده های حجیم با هدف افزایش سرعت و بهره وری ثبت و مدیریت منشا داده ها و مستندسازی فرآیندهای جمع آوری پردازش و انتقال اطلاعات مدیریت فرآیند پردازش مجدد داده های ناموفق و اطمینان از صحت و یکپارچگی داده های ذخیره شده 3 شایستگی های فنی تسلط بر زبان برنامه نویسی Python تسلط بر زبان SQL تسلط بر طراحی و پیاده سازی فرآیندهای ETL ELT تسلط بر کار با REST API و ساختار داده JSON آشنایی عملی با روش های استخراج اطلاعات از وب Web Scraping تسلط بر پایگاه داده PostgreSQL تسلط بر موتور جست وجو و تحلیل داده Elasticsearch توانایی طراحی مدل داده و بهینه سازی ساختار ایندکس گذاری آشنایی با سیستم عامل Linux آشنایی با Docker و مدیریت محیط های اجرایی آشنایی با پردازش داده های حجیم توانایی مدیریت خطا پردازش مجدد و زمان بندی خطوط انتقال داده آشنایی با ابزار Git و مدیریت نسخه 4 شایستگی های رفتاری ارتباط موثر مسئولیت پذیری پیگیری و نتیجه گرایی دقت و توجه به جزئیات کار تیمی و همکاری 6 ابزارها و فناوری های مورد استفاده Python PostgreSQL Elasticsearch Apache Airflow Docker Linux Git Pandas Requests httpx BeautifulSoup Scrapy Playwright Kibana MinIO تهران تهران پاسداران تمام وقت ارتباطات سیار ایران همراه اول کارشناس جنسیت تفاوتی ندارد تلکام
جویا کار این آگهی را از سایت
جابویژن
استخراج نموده است و هیچ مسئولیتی در قبال این آگهی ندارد.
دقت نمایید که کارفرما حق دریافت هیچ گونه وجهی از کارجو را نداشته و این امر خلاف قانون است. در صورت مشاهده این موارد یا سایر تخلفات با کلیک روی (گزارش آگهی) ما را در ارائه خدمات بهتر یاری نمایید.
در غیر این صورت میتوانید با کلیک بر روی دکمه "درج نظر" نظر خود را در مورد این آگهی ثبت کنید.
جهت اشتراک در شبکه های اجتماعی روی کلیدهای زیر کلیک کنید
همچنین میتوانید لینک کوتاه زیر را جهت دسترسی به صفحه فوق برای اشتراک گذاری کپی کنید
کپی کردن لینک
نظرات در مورد این آگهی: درج نظر