تقييم شامل لمخطط صدى القلب مع رؤية معدة للغة الذكاء الاصطناعي

تخطيط صدى القلب هو طريقة تصوير القلب الأكثر استخدامًا على نطاق واسع، حيث يلتقط بيانات الفيديو بالموجات فوق الصوتية لتقييم بنية القلب ووظيفته¹. يتمتع الذكاء الاصطناعي (AI) في تخطيط صدى القلب بالقدرة على تبسيط المهام اليدوية وتحسين إمكانية التكرار والدقة². ومع ذلك، فإن معظم نماذج الذكاء الاصطناعي لتخطيط صدى القلب هي أنظمة ذات عرض واحد ومهمة واحدة لا تجمع معلومات تكميلية من طرق عرض متعددة تم التقاطها أثناء الاختبار الكامل^3,4، وبالتالي يؤدي إلى محدودية الأداء ونطاق التطبيقات. لمعالجة هذه المشكلة، نقدم EchoPrime، وهو نموذج أساسي متعدد الرؤية ومبني على الرؤية واللغة ومعتمد على الفيديو، تم تدريبه على أكثر من 12 مليون زوج من تقارير الفيديو. يستخدم EchoPrime التعلم المتباين لتدريب نموذج تضمين موحد لجميع طرق العرض القياسية في دراسة شاملة لمخطط صدى القلب مع تمثيل الأمراض والتشخيصات النادرة والشائعة. يستخدم EchoPrime بعد ذلك تصنيف العرض ووحدة الاهتمام التشريحي المستنيرة للعرض لوزن التضمينات الخاصة بالفيديو والتي تحدد بدقة العلاقة بين طرق عرض تخطيط صدى القلب والهياكل التشريحية. من خلال التفسير المعزز للاسترجاع، يقوم EchoPrime بدمج المعلومات من جميع مقاطع فيديو مخطط صدى القلب في دراسة شاملة ويقوم بتفسير سريري شامل. في مجموعات البيانات من خمسة أنظمة دولية مستقلة للرعاية الصحية، تحقق EchoPrime أداءً متطورًا على 23 معيارًا متنوعًا لشكل ووظيفة القلب، متجاوزة أداء كل من الأساليب الخاصة بالمهمة ونماذج الأساس السابقة. بعد إجراء تقييم سريري صارم، يستطيع EchoPrime مساعدة الأطباء في التقييم الأولي الآلي لتخطيط صدى القلب الشامل.