طورت شركة جومايو، المتخصصة في التحقق من الهوية والكشف عن الاحتيال، منصة ميزات فورية على خدمات أمازون ويب سيرفيسز تحل تحديات الكمون العالي وعدم تناسق البيانات والنشر اليدوي. تستخدم المنصة الجديدة خدمات متعددة منها Amazon SageMaker Feature Store و Apache Flink و Kinesis Data Streams لتحقيق استجابة تحت مئة ميلي ثانية، وهي متطلبات الامتثال لاتفاقيات مستويات الخدمة في كشف الاحتيال.
المعمارية تعتمد على نهج يركز على البث المباشر، حيث تتدفق البيانات عبر Kinesis Data Streams إلى تطبيقات Flink التي تعالجها وتغنيها قبل كتابتها إلى منصة الميزات. بموازاة ذلك، تتجه البيانات الدفعية عبر Data Firehose إلى S3، حيث تشغل Amazon EMR عمليات تحويل ثقيلة قبل تخزينها في جداول Apache Iceberg. نُشرت المعمارية عبر ثلاث مناطق جغرافية لضمان الموثوقية والمرونة.
أظهرت قياسات الكمون أن الكمون بالنسبة المئوية 95 بلغ 16.9 ميلي ثانية، مع متوسط قراءة 8.44 ميلي ثانية وكتابة 18.6 ميلي ثانية. المنصة تتعامل أيضًا مع الأحداث المتأخرة وتخزنها بكفاءة، مما يضمن عدم فقدان بيانات حاسمة. يضاف إلى ذلك أن النظام يدير تعريفات الميزات بشكل مركزي بدلًا من التشتت السابق بين الفرق، مما سهّل إعادة الاستخدام والتطابق.
أحدثت المنصة ثورة في عمليات النشر، حيث استبدلت الإجراءات اليدوية التي استغرقت أسابيع بعملية مؤتمتة موحدة. من الناحية المالية، حققت الاستثمارات في تحسين الكفاءة والتخزين المؤقت توفيرات تقارب 120 ألف دولار سنويًا مقارنة بالأنظمة السابقة المجزأة.
أرست المنصة خمسة مبادئ أساسية: التصميم الأول الموجه نحو البث، التعريفات المركزية للميزات، استراتيجية التخزين على طبقات، المراقبة المستمرة للصحة والكمون، والتعاون بين فرق الهندسة والذكاء الاصطناعي والبيانات. يوفر هذا النهج حلًا موثوقًا لحالات الاستخدام التي تتطلب تنبؤات بكمون منخفض، مثل كشف الاحتيال والتوصيات.
التعليقات (0)
لا توجد تعليقات بعد. كن أول المعلّقين.