مهندس معماري Kafka / مهندس معماري بيانات متدفقة

الوصف

المسمى الوظيفي – مهندس معماري Kafka / مهندس معماري بيانات متدفقة الشركة – TCS (الشرق الأوسط وأفريقيا) الموقع – جدة، المملكة العربية السعودية نوع الوظيفة – دوام كامل نبذة عنا: تاتا لخدمات الاستشارات (TCS) هي مؤسسة لخدمات تكنولوجيا المعلومات والاستشارات وحلول الأعمال، وقد كانت شريكًا للعديد من أكبر الشركات في العالم في رحلات تحولها لأكثر من 50 عامًا. تقدم TCS محفظة متكاملة من خدمات وحلول الأعمال والتكنولوجيا والهندسة، بقيادة استشارية ومدعومة بالذكاء المعرفي. يتم تقديم ذلك من خلال نموذج التسليم الرشيق المستقل عن الموقع™ الفريد، المعترف به كمعيار للتميز في تطوير البرمجيات. كجزء من مجموعة تاتا، أكبر مجموعة أعمال متعددة الجنسيات في الهند، تضم TCS أكثر من 616,171 من أفضل الاستشاريين المدربين في العالم من 157 جنسية في 53 دولة. لمزيد من المعلومات، تفضل بزيارة www.tcs.com وتابع أخبار TCS على @TCS_News. وصف الوظيفة: المسؤوليات الرئيسية الهندسة المعمارية والتصميم - تصميم بنية Kafka على مستوى المؤسسة متوافقة مع Bank Lakehouse (Medallion - Bronze/Silver/Gold). - تحديد أنماط بنية تعتمد على الأحداث للاستيعاب والمعالجة في الوقت الفعلي. - وضع استراتيجية الموضوعات، التقسيم، النسخ المتماثل، سياسات الاحتفاظ. - تصميم إعداد Kafka متعدد المجموعات (التطوير/الاختبار/الإنتاج، استراتيجية التعافي من الكوارث). - ضمان استعادة دقيقة في نقطة زمنية محددة وتحمل الأخطاء. تنفيذ المنصة - قيادة إعداد وتكوين: - وسطاء Kafka، وضع Zookeeper / Kraft - إطار عمل Kafka Connect - سجل المخطط (Schema Registry) - معالجة التدفق (Kafka Streams / Spark Streaming / Flink) - دمج Kafka مع: - منصة بيانات Cloudera (CDP) - Informatica (لـ ETL/ELT) - مستودع البيانات (Teradata) - Denodo (لطبقة المحاكاة الافتراضية) هندسة البيانات في الوقت الفعلي - تصميم خطوط أنابيب لـ: - استيعاب تدفق الأحداث - استيعاب الدفعات شبه الوقت الفعلي - بناء خطوط أنابيب CDC (التقاط تغيير البيانات) باستخدام Kafka Connect (Debezium). - تمكين الاستيعاب من أنظمة المصدر. - دعم تكامل الأحمال التزايدية والتاريخية. الأداء وقابلية التوسع - ضمان: - إنتاجية عالية وزمن انتقال منخفض - دعم المستهلكين المتزامنين دون تدهور - تحسين: - استراتيجية التقسيم - توسيع نطاق مجموعة المستهلكين - تكوينات المنتج (acks، التجميع، الضغط) المرونة والموثوقية - تنفيذ: - استراتيجيات تجاوز الفشل - نسخ البيانات المتماثل والمتانة (متطلبات وقت التشغيل >99.9%) - التعامل مع: - أعطال الأجهزة - سيناريوهات تلف البيانات - تصميم إعادة المحاولة، قوائم انتظار الرسائل الميتة (DLQ)، أطر عمل معالجة الأخطاء حوكمة البيانات والأمن - فرض: - التحكم في الوصول المستند إلى الدور (RBAC) - التشفير (أثناء النقل وفي حالة السكون) - دعم إخفاء/ترميز البيانات (متوافق مع التصنيف) - التكامل مع: - أدوات البيانات الوصفية والنسب - أطر عمل الحوكمة (امتثال NDMO/NDI) المراقبة والعمليات - تنفيذ المراقبة باستخدام: - Cloudera Manager - مقاييس Kafka (JMX، Prometheus، Grafana) - تحديد: - عتبات التنبيه - مراقبة اتفاقية مستوى الخدمة (SLA) لخطوط أنابيب الاستيعاب - ضمان قابلية الملاحظة لـ: - مراقبة التأخير - معدلات الإنتاجية والأخطاء دعم معالجة المرحلة الأولى - تقييم خطوط أنابيب ومكونات Kafka الحالية. - تحديد: - خطوط الأنابيب المعيبة - تدفقات الاستيعاب المفقودة - إعادة التصميم/إعادة البناء عند الحاجة. - ضمان التوافق مع البنية المستهدفة ونماذج البيانات (FSLDM/FSAS). دعم تمكين التقارير - ضمان: - توفر البيانات في الوقت الفعلي للتقارير اللاحقة - دعم: - تحسين أداء الاستعلام - اتساق البيانات عبر Bronze/Silver/Gold - حل المشكلات التي تؤثر على التقارير (عدم تطابق البيانات، التأخير). التوثيق والحوكمة - تقديم: - تصميم معماري عالي المستوى - تصميم منخفض المستوى (LLD) لخطوط أنابيب Kafka - كتالوج الموضوعات وتعريفات المخطط - صيانة: - توثيق نسب البيانات - خرائط المصدر إلى الهدف - المشاركة في: - مجالس حوكمة الهندسة المعمارية - عمليات إدارة التغيير المهارات التقنية الرئيسية التقنيات الأساسية - Cloudera Kafka (إلزامي) - Kafka Connect، Kafka Streams - سجل المخطط (Avro/Protobuf/JSON) أدوات النظام البيئي - Cloudera (CDP) - Apache Spark / Spark Streaming - Apache Flink (مفضل) - Informatica (الوعي بالتكامل) - Teradata - Denodo البيانات والتكامل - أدوات CDC (Debezium مفضل) - واجهات برمجة تطبيقات REST، تكامل الخدمات المصغرة - أنماط تصميم ETL/ELT DevOps والبنية التحتية - Kubernetes / Docker (اختياري ولكنه مفضل) - CI/CD لنشر خطوط الأنابيب - بيئات Linux خبرة في المجال المصرفي (إلزامي) - خبرة في مجال BFSI - فهم: - التقارير التنظيمية - تسوية البيانات (دقة ≥99%) - أنظمة مكافحة غسل الأموال، المدفوعات، تمويل التجارة المهارات الشخصية - إدارة قوية لأصحاب المصلحة (الأعمال + تكنولوجيا المعلومات) - القدرة على العمل في بيئة متعددة البائعين - الخبرة في برامج التحول واسعة النطاق - مهارات قوية في حل المشكلات وتحليل السبب الجذري (RCA) شكرًا لاهتمامك بالتقدم لهذا المنصب في TCS. سنقوم بمراجعة طلبك وسنعاود الاتصال بك إذا كنا نأخذ اهتمامك بهذه الفرصة في الاعتبار. الموعد النهائي للتقديم: 30 يونيو 2026 ملاحظة الخصوصية: https://www.tcs.com/connect-with-tcs/privacy-policy

ما ستقوم به

• • سيقوم مهندس معماري Kafka بتصميم بنية Kafka على مستوى المؤسسة وتحديد أنماط بنية تعتمد على الأحداث للاستيعاب والمعالجة في الوقت الفعلي. سيقود إعداد وتكوين مكونات Kafka ويضمن الأداء العالي وقابلية التوسع والموثوقية لخطوط أنابيب البيانات.

المتطلبات

يجب أن يكون لدى المرشحين خبرة في مجال BFSI وفهم قوي للتقارير التنظيمية وتسوية البيانات. تشمل المهارات التقنية الرئيسية الخبرة في Kafka وأدوات نظامها البيئي، بالإضافة إلى الإلمام بممارسات حوكمة البيانات والأمن.

الأسئلة الشائعة