يتضمن الدور تصميم وتنفيذ خطوط بيانات قوية لالتقاط البيانات، تمكين نماذج البيانات الخاصة بـ SAS Viya للغش والهدر والإساءة (FWA)، وتحسين أحمال البيانات الكبيرة في Google BigQuery. يجب أن يمتلك المرشحون المثاليون خبرة قوية في تطوير ETL/ELT باستخدام Informatica IDMC، منصات البيانات السحابية، ونماذج بيانات الرعاية الصحية.
المسؤوليات الرئيسية:
1- استيعاب البيانات المؤسسية والهندسة البيانات:
بناء خرائط/تدفقات مهام قابلة لإعادة الاستخدام ومعلمات.
تنفيذ CDC، التحميلات غير القابلة للتكرار، تطور المخطط، بوابات جودة البيانات (DQ).
تحسين تحميلات BigQuery (التقسيم/التجميع، التحميل مقابل التدفق).
إعداد التحكم في الإصدارات و CI/CD.
2- تصميم تحويل البيانات والخرائط:
تحليل المصادر؛ تحديد خرائط الحقول والقواعد.
تحديد منطق الأعمال، والانضمام، والبحث، والاشتقاق.
تحديد قواعد جودة البيانات، الاستثناءات، والرفض.
3- الهندسة التنظيمية، والأتمتة، والهندسة الموثوقة:
تعيين المعلمات لتدفقات المهام؛ تحديد الجداول الزمنية/الاعتمادية.
تنفيذ محاولات التكرار/الرجوع والنقاط المرجعية.
دمج المراقبة/التنبيهات (وحدة التحكم في العمليات، ChatOps).
4- إدارة الأدوار وخصوصية البيانات:
تحديد حسابات IAM ذات الحد الأدنى من الصلاحيات وحسابات الخدمة.
تطبيق أمان وطمس البيانات (المجموعات/الجداول/الصفوف/الأعمدة).
تمكين سجلات التدقيق والاحتفاظ بالبيانات؛ تصنيف PHI/PII.
5- نمذجة وتهيئة نطاق SAS Viya FWA:
جمع المدخلات للنموذج، الميزات، النوافذ، التفصيل.
توافق منطق التقييم وخطوات هندسة الميزات.
تصميم مجموعات بيانات FWA مهيئة (المطالبات، الأهلية، مقدمو الخدمات، الأعضاء، الموافقات المبدئية).
6- مراقبة العمل، وتحسين الأداء والتكلفة:
تتبع الحداثة، صحة المهام، الأحجام، الشذوذ.
مراقبة اتفاقيات مستوى الخدمة (المدة، الأخطاء، التكلفة/التيرابايت، الفتحات).
تعديل BigQuery.
تحسين التكلفة (دورة حياة التخزين، تحسين الاستعلامات، التخزين المؤقت).
المهارات المطلوبة:
أدوات هندسة البيانات: Informatica IDMC، Airflow، Apache Spark.
لغات البرمجة: SQL، Python.
منصات التحليل: SAS Viya، SAS Enterprise Guide.
تقنيات السحابة: Google Cloud Platform (BigQuery، IAM)، Azure/AWS (اختياري).
أدوات التصوير البياني: Power BI، Tableau.
خبرة قوية في BigQuery (SQL، النمذجة، التعديل).
إتقان استخدام Informatica IDMC/IICS في ETL/ELT.
خبرة في أنابيب البيانات المؤسسية.
تعرض لـ SAS Viya (FWA) يعتبر ميزة إضافية.
معرفة ببيانات الرعاية الصحية (المطالبات، مقدمو الخدمات، الأعضاء).
فهم لأمن السحابة (IAM، حسابات الخدمة، النقاط النهائية الخاصة).
التعليم:
درجة البكالوريوس في علوم الكمبيوتر، تكنولوجيا المعلومات، نظم المعلومات أو مجال ذي صلة.