క్లినికల్ భాషలో తర్కించేందుకు శిక్షణ పొందిన పాథాలజీ మోడల్

Nature Medicineలో వచ్చిన ఒక కొత్త పేపర్, మొత్తం స్లైడ్ల స్థాయిలో పనిచేయడానికి రూపొందించిన ఒక pathology foundation model‌ను వివరిస్తుంది; అదే సమయంలో దాని outputలను క్లినికల్ ప్రాక్టీస్‌లో ఉపయోగించే question-and-answer reasoning రకాలతో సరిపోల్చుతుంది. PRISM2 అని పిలిచే ఈ వ్యవస్థను 2.3 million whole-slide images మరియు 700,000 pathology reports నుండి తీసుకున్న 14 million clinical question-answer pairsపై శిక్షణ ఇచ్చారని, జూలై 31న ప్రచురితమైన అధ్యయనం చెబుతోంది.

ముందున్న computational pathology models‌ కంటే PRISM2 ఒక అడుగు ముందుకు అని పరిశోధకులు చూపిస్తున్నారు; అవి ప్రధానంగా image patches‌ను encode చేయడంపై దృష్టి పెట్టాయి. వారి దృష్టిలో, ఆ ప్రాథమిక వ్యవస్థలు ఈ రంగంలో వేగవంతమైన పురోగతిని నడిపించినప్పటికీ, వాటి ప్రత్యక్ష క్లినికల్ ఉపయోగం పరిమితంగానే ఉంది. PRISM2 ఆ ఖాళీని histomorphology, అంటే tissue images‌లో కనిపించే అంశాలను, language supervision ద్వారా వ్యక్తమయ్యే diagnostic reasoning‌తో కలిపి పూరించడానికి ఉద్దేశించబడింది.

ఈ జత ముఖ్యమైనది, ఎందుకంటే pathology అనేది కేవలం దృశ్య గుర్తింపు పని మాత్రమే కాదు. ప్రాక్టీస్‌లో, clinicians whole-slide findings‌ను అర్థం చేసుకుని, వాటిని disease patterns‌తో కలిపి, నిర్దిష్ట diagnostic questions‌కు సమాధానాలు ఇస్తారు. ఈ dialogue-style supervision సాధారణీకరించగల representations కోసం scalable మరియు clinically grounded training signal‌ను అందిస్తుందని రచయితలు వాదిస్తున్నారు.

మోడల్ ఏపై శిక్షణ పొందింది

Abstract ప్రకారం, మోడల్ యొక్క multimodal training slide-level pathology data‌ను పెద్ద స్థాయి textual supervision‌తో కలిపింది. image side‌లో 2.3 million whole-slide images ఉన్నాయి. language side‌లో 700,000 pathology reports నుండి రూపొందించిన 14 million question-answer pairs ఉన్నాయి. ఈ clinical dialogue supervision వల్ల PRISM2 visual tissue patterns‌ను labels‌కే కాదు, diagnostic reasoning‌తో కూడా align చేయగలదని అధ్యయనం చెబుతోంది.

దీని ఫలితంగా, రచయితలు చెప్పినట్లుగా, మోడల్ రెండు వేర్వేరు వినియోగ విధానాలను మద్దతు ఇస్తుంది. ఒకటి prompt-based inference, ఇందులో మోడల్ task-specific prompts‌కు నేరుగా సమాధానం ఇవ్వగలదు. మరొకటి transferable embeddings‌కు మూలంగా ఉండటం, వీటిని classification, biomarker work, మరియు survival analysis వంటి downstream tasks‌లో ఉపయోగించవచ్చు.

ఈ dual-use డిజైన్ పాథాలజీ workflows‌కు ముఖ్యమైనది, ఎందుకంటే ఈ రంగంలో కఠినంగా నిర్వచించిన clinical products‌తో పాటు పరిశోధన వాతావరణాలు కూడా ఉంటాయి, అక్కడ బృందాలు ఒకే ప్రయోజనానికి ఉపయోగించే classifier కంటే మళ్లీ ఉపయోగించుకోగల representation layer‌ను కోరుకోవచ్చు.

పేపర్‌లో PRISM2 ఎలా పనిచేసింది

prompt-based inference‌తో PRISM2, prostate, breast, మరియు breast lymph node‌లో cancer detection కోసం calibrate చేసిన clinical-grade products యొక్క balanced accuracyను సాధించింది లేదా దానిని మించింది, మరియు ఇది P < 0.05 వద్ద గణాంకపరంగా ముఖ్యమైనదిగా నివేదించబడింది. ఇది అధ్యయనంలోని అత్యంత స్పష్టమైన ప్రాయోగిక దావాలలో ఒకటి, ఎందుకంటే ఇది మోడల్‌ను కేవలం research baselines‌తో కాకుండా clinical-grade detection కోసం నిర్మించిన systems‌తో పోలుస్తుంది.

comprehensive diagnostic, biomarker, మరియు survival benchmarks‌పై linear probingతో అంచనా వేసినప్పుడు PRISM2 embeddings గత foundation models‌కన్నా గణాంకపరంగా ఎప్పుడూ తక్కువగా ప్రదర్శించలేదని రచయితలు కూడా నివేదిస్తున్నారు. మరో మాటలో, abstract‌లో వివరించిన benchmark set అంతటా, ఒక domain‌లో పనితీరును త్యాగం చేసి మరొకదాంట్లో లాభం పొందకుండా, మోడల్ నిరంతరం prior foundation-model representation quality‌ను సరిపోల్చింది లేదా మించింది.

మూడవ ఫలితం fine-tuning efficiencyను సూచిస్తుంది. survival prediction‌పై task-specific fine-tuning, అదే పెద్ద survival dataset‌పై from scratch training కంటే మెరుగ్గా పనిచేసిందని అధ్యయనం చెబుతోంది. ఇది pretraining కేవలం broad-purpose features‌ను మాత్రమే తయారు చేయడం కాకుండా, specialized follow-on tasks‌కు బలమైన ఆధారాన్ని కూడా సృష్టిస్తోందని సూచిస్తుంది.

ఈ పేపర్ ఎందుకు ప్రత్యేకంగా నిలుస్తుంది

training corpus పరిమాణం ఈ అధ్యయనం దృష్టిని ఆకర్షించే ఒక కారణం. మరొకటి, భాషను visual pathology data మరియు క్లినికల్ ప్రాక్టీస్ మధ్య bridge‌గా ఎలా చూపుతుందనే విషయం. వైద్యంలో అనేక foundation-model ప్రయత్నాలు scale‌పై దృష్టి పెట్టాయి, కానీ supervision signal pathology నిర్ణయాలు నిజంగా ఎలా తీసుకుంటారు మరియు ఎలా కమ్యూనికేట్ చేస్తారు అనే విధానాన్ని ప్రతిబింబించకపోతే scale alone సరిపోదని ఈ పేపర్ వాదిస్తోంది.

clinical dialogueపై దృష్టి పెట్టడం ద్వారా, పరిశోధకులు మోడల్‌ను prompt-based tasks‌కు మరింత ఉపయోగకరంగా మరియు workflow పరంగా మరింత interpretable‌గా చేయడానికి ప్రయత్నిస్తున్నారు, అయితే abstract పూర్తి explainability లేదా స్వతంత్ర clinical deployment‌ను పేర్కొనలేదు. దానికి బదులుగా, అధ్యయనం diagnostic reasoning‌లో పాతుకుపోయిన మరియు అనేక pathology tasks‌ల్లో transfer అయ్యే మోడల్‌ను చూపిస్తుంది.

whole-slide imaging అత్యంత పెద్ద మరియు సమాచార-సమృద్ధమైన inputs‌ను ఉత్పత్తి చేసే రంగంలో ఈ తేడా ముఖ్యమైనది. local patches ద్వారా మాత్రమే కాకుండా slide level‌లో తర్కించగల మోడల్ diagnosis మరియు prognosis‌కు ముఖ్యమైన broader structural context, tissue relationships, మరియు disease patterns‌ను పట్టు కోవడానికి మెరుగైన స్థితిలో ఉండవచ్చు.

ఇది తర్వాత ఎక్కడ ముఖ్యంగా ఉండొచ్చు

paper యొక్క abstract పరిమితులలో, PRISM2 research tooling మరియు clinically relevant model development మధ్య విస్తృత మధ్యస్థాన్ని లక్ష్యంగా పెట్టుకున్నట్లుగా కనిపిస్తోంది. నివేదించిన evaluations cancer detection, diagnostic benchmarks, biomarker benchmarks, మరియు survival benchmarks‌ను కవర్ చేస్తున్నాయి; ఇది రచయితలు ఈ వ్యవస్థను సన్నగా tune చేసిన product‌గా కాకుండా ఒక general pathology representation model‌గా నిలబెడుతున్నారని సూచిస్తుంది.

దీని అర్థం ఈ paper ఆసుపత్రుల్లో తక్షణ సాధారణ వినియోగాన్ని కోరుతోందని కాదు. abstract comparative performance, representation quality, మరియు fine-tuning benefits‌పై దృష్టి పెట్టింది. కానీ ఈ పని గమనించదగినది, ఎందుకంటే ఇది తదుపరి తరం pathology AI కోసం ఒక నిర్దిష్ట recipe‌ను వాదిస్తోంది: చాలా పెద్ద slide datasets‌పై శిక్షణ, clinically meaningful language‌తో supervision, మరియు direct prompting మరియు downstream adaptation రెండింటిలోనూ evaluation.

ఆ recipe paper‌లో వివరించిన benchmarks‌కు మించి కూడా స్థిరంగా నిరూపితమైతే, అది భవిష్యత్తు pathology models ఎలా నిర్మించబడతాయనే దానిపై ప్రభావం చూపవచ్చు, ముఖ్యంగా visual evidence‌ను question-driven medical reasoning‌తో కలపాల్సిన applications కోసం.

అధ్యయనంలోని ముఖ్యాంశాలు

  • PRISM2ను 2.3 million whole-slide imagesపై శిక్షణ ఇచ్చారు.
  • language supervision 700,000 pathology reports నుండి తీసుకున్న 14 million question-answer pairs‌ను ఉపయోగించింది.
  • మోడల్ prompt-based inference మరియు downstream tasks కోసం transferable embeddings‌ను మద్దతు ఇస్తుంది.
  • prostate, breast, మరియు breast lymph node tasks కోసం clinical-grade cancer detection products‌కు సమానమైన లేదా మెరుగైన పనితీరును paper నివేదిస్తోంది.
  • పరీక్షించిన benchmark categories అంతటా PRISM2 embeddings గత foundation models‌కన్నా గణాంకపరంగా ఎప్పుడూ తక్కువగా ప్రదర్శించలేదని study చెబుతోంది.

విస్తృత ప్రాముఖ్యత ఒకే benchmark విజయం కంటే training strategyలోనే ఎక్కువగా ఉంది. PRISM2ను language-supervised pretraining మానవ diagnostic reasoning‌ను pathologyలో foundation-model performance‌తో కలుపగలదన్న సాక్ష్యంగా చూపిస్తున్నారు. clinical relevance‌ను కోల్పోకుండా tasks across generalize చేసే systems కోసం చూస్తున్న రంగంలో, ఇది అర్థవంతమైన మార్పు.

ఈ వ్యాసం Nature Medicine నివేదిక ఆధారంగా ఉంది. మూల వ్యాసాన్ని చదవండి.

Originally published on nature.com