சேப்சிஸ் AI ஆராய்ச்சியில் மறைந்திருந்த பிழை ஒன்றை ஆராய்ச்சியாளர்கள் கண்டறிந்தனர்
npj Digital Medicine இதழில் வெளியான புதிய பகுப்பாய்வு, சேப்சிஸ் சிகிச்சையை வழிநடத்தும் நோக்கத்திலான பல artificial intelligence ஆய்வுகள் ஒரு நுணுக்கமான ஆனால் முக்கியமான பிழை மீது கட்டப்பட்டிருக்கலாம் என்று எச்சரிக்கிறது. பிரச்சினை என்னவென்றால், reinforcement learning பயன்படுத்தப்படும் போது patient data-ஐ index மற்றும் preprocess செய்வதில் சிறிய temporal misalignment ஏற்படுகிறது. இது காலப்போக்கில் treatment decisions-ஐ மாதிரி அமைக்க பயன்படும் machine-learning அணுகுமுறை.
ஆசிரியர்களின் கருத்துப்படி, இந்த “time-slip” ஒரு system உண்மையில் இருப்பதைவிட அதிக திறனுடையதாகத் தோன்றச் செய்யும்; ஏனெனில் அது எதிர்காலத் தகவலை கடந்த கால முன்கணிப்புகளைப் பாதிக்க அனுமதிக்கிறது. காகிதத்தில் அது சிறப்பான performance metrics-ஐ உருவாக்கலாம். ஆனால் clinical பயன்பாட்டில், அதே தவறு treatment recommendations-ஐ தவறான திசையில் தள்ளக்கூடும்.
இந்த பிழை ஏன் முக்கியம்
Sepsis நேரத்தை மிகக் கடுமையாகக் கணக்கில் கொள்ள வேண்டிய நிலை. fluids, medications, மற்றும் escalation of care குறித்த முடிவுகள் நிகழ்வுகள் எவ்வாறு தொடர்ச்சியாக நடைபெறுகின்றன என்பதைத் துல்லியமாகப் புரிந்துகொள்வதையே சார்ந்துள்ளன. Reinforcement learning இந்த சூழலில் ஈர்க்கக்கூடியது, ஏனெனில் அது தனித்துக் காட்சிகளாக அல்லாமல் trajectories-இல் actions-ஐ மதிப்பிட உருவாக்கப்பட்டது. ஆனால் timeline சிறிது தவறாக இருந்தாலும், அந்த பலமே பாதகமாக மாறுகிறது.
ஆய்வின் ஆசிரியர்கள் simulation experiments பயன்படுத்தி, இந்த flawed technique சேப்சிஸ் சிகிச்சை தொடர்பான peer-reviewed பணிகளில் பொதுவாக இருந்தது என்பதை கண்டறிந்தனர். Emory University-யின் Shengpu Tang, இந்த பிரச்சினை கடந்த பத்தாண்டுகளில் இந்த துறையில் வெளியான பெரும்பாலான reinforcement-learning papers-ஐ, ஆசிரியர்களின் முந்தைய பணியையும் உட்பட, பாதித்திருப்பதாக கூறினார்.
இந்த ஒப்புக்கொள்ளல் இந்த paper-ஐ முக்கியமாக்குகிறது. இது ஒரே ஒரு outlier study-யை விமர்சிப்பதல்ல. AI உயர்-ஆபத்து hospital settings-இல் treatment strategies-ஐ optimize செய்ய முடியும் என்ற ஆதாரமாக அடிக்கடி மேற்கோள் காட்டப்பட்டுள்ள ஒரு முழு research stream-க்கு இது methodological warning ஆகும்.
எப்படி செயல்திறன் அதிகமாகத் தோன்றுகிறது
மூலப் பொருளின் படி, test data-வும் training data போலவே misaligned ஆக இருந்தால், இந்த தவறு மறைந்து போகலாம். அந்த நிலையில் model ஒரு flawed setup-இல் மதிப்பிடப்படுகிறது; தொடக்கத்தில் apparent success-ஐ உருவாக்கிய அதே leakage-ஐ அது பரிசளிக்கிறது. அதனால் கிடைக்கும் metrics வலுவாகத் தோன்றும், ஆனால் அவை உண்மையான உலக decision-making சூழலை பிரதிபலிக்காது.
ஆராய்ச்சியாளர்கள் இதை AI agent நேரத்தின் அம்பிலிருந்து வழுக்கி விழுவது போல விவரிக்கிறார்கள். அந்த உருவகம் அடிப்படை சிக்கலைத் தெளிவாகச் சொல்கிறது: treatment policy ஒன்றைக் கற்றுக்கொள்கிறதாகத் தோன்றும் model, clinician உண்மையில் முடிவு செய்யும் நேரத்தில் கிடைக்காத தகவலின் உதவியையே பெறக்கூடும்.
Paper-இன் நடைமுறை எச்சரிக்கை கடுமையானது. இத்தகைய flawed sepsis systems நடைமுறைப்படுத்தப்பட்டால், ஆராய்ச்சியாளர்கள் கண்டுபிடித்தது போல, கிட்டத்தட்ட பாதி patient states-இல் அவை overtreatment அல்லது undertreatment பரிந்துரைக்கக்கூடும். இது ஒரு academic preprocessing choice-ஐ patient-safety issue-ஆக மாற்றும் error profile.
ஒரு எளிய workaround மற்றும் ஒரு பெரிய பாடம்
ஆசிரியர்கள் இந்த பிழையைத் தவிர்க்க ஒரு workaround-ஐ உருவாக்கியதாகவும் தெரிவிக்கின்றனர். அதை health care-இல் reinforcement-learning problems-ஐ அமைக்கும் முறையின் அடிப்படை reformulation ஆகவே அவர்கள் விவரிக்கிறார்கள், வெறும் cosmetic adjustment அல்ல. உண்மையான clinical data அடிப்படையிலான simulation experiments-இல், time shift-ஐச் சரிசெய்த பிறகு inflated advantage மறைந்தது. திருத்தப்பட்ட நிலையில், reinforcement-learning அணுகுமுறை mortality-ஐ குறைக்கவும் இல்லை, அதிகரிக்கவும் இல்லை.
இந்த முடிவு சற்று கடினமானது, ஆனால் பயனுள்ளது. retrospective data-விலிருந்து உயர்ந்த sepsis treatment policies-ஐ AI மூலம் பெறலாம் என்ற துறையின் headline claims-ஐ மீண்டும் மதிப்பாய்வு செய்ய வேண்டியிருக்கலாம் என்பதை இது காட்டுகிறது. இதனால் reinforcement learning மருத்துவத்தில் எதிர்காலம் இல்லாதது என்று அர்த்தமில்லை. deployment rhetoric-க்கு முன் methodological discipline இருக்க வேண்டும் என்பதே இதன் பொருள்.
இது sepsis-ஐத் தாண்டி ஏன் பொருந்துகிறது
இந்த paper-இன் விளைவுகள் ஒரே நோயைத் தாண்டி செல்கின்றன. Health-care AI பெரும்பாலும் sequential records, மாறும் patient states, தாமதமான outcomes, மற்றும் partially observed data ஆகியவற்றை கையாள்கிறது. இவையெல்லாம் time alignment பிழைகள் அமைதியாக முடிவுகளை சிதைக்கக்கூடிய சூழல்கள். பயன்பாடு உயிர்-மரணத்துடன் நேரடியாக தொடர்புடையதாக இருக்கும் போது, மறைந்த indexing தவறு காரணமாக நன்றாகத் தோன்றும் benchmark-க்கு இடமளிப்பு மிகக் குறைவு.
ஆசிரியர்களின் எச்சரிக்கை AI adoption-இன் ஒரு பொதுவான தோல்வி முறையையும் எதிர்க்கிறது: retrospective studies-இல் model performance-ஐ bedside use-க்கு இயல்பாக மாற்றக்கூடியது என்று கருதுவது. உண்மையில், clinical validity என்பது evaluation setup உண்மையில் முடிவு எடுக்கும் நேரத்தில் கிடைக்கும் தகவலைப் பிரதிபலிக்கிறதா என்பதையே சார்ந்துள்ளது.
- இந்த ஆய்வு சேப்சிஸ் தொடர்பான reinforcement-learning ஆராய்ச்சியில் ஒரு பொதுவான time misalignment-ஐ கண்டறிந்தது.
- இந்த பிழை எதிர்கால நிகழ்வுகளை கடந்த கால முன்கணிப்புகளில் சேர்த்து முடிவுகளை அதிகமாகக் காட்டக்கூடும்.
- பிழையான systems கிட்டத்தட்ட பாதி patient states-இல் over- அல்லது undertreat செய்யக்கூடும் என்று ஆராய்ச்சியாளர்கள் கூறுகின்றனர்.
- பிழையைச் சரிசெய்தபின், அவர்களின் பரிசோதனைகளில் mortality benefit மறைந்தது.
இதனால் இந்த paper ஒரு technical footnote-ஐ விட governance warning ஆகிறது. மருத்துவ AI-இல், குறிப்பாக critical care-இல், framing-இல் நிகழும் சிறிய தவறுகள் confidence-இல் பெரிய தவறுகளை உருவாக்கலாம். இந்த ஆய்வு, துறையில் பிரகாசமான எண்களை கொண்டாடுவதற்குப் பதிலாக, அந்த எண்கள் உண்மையான பிரச்சினையைக் கூட அளக்கிறதா என்பதை முதலில் உறுதிப்படுத்த வேண்டும் என்று வலியுறுத்துகிறது.
இந்தக் கட்டுரை Medical Xpress செய்திப்படிப்பைப் பொறுத்தது. மூலக் கட்டுரையை வாசிக்கவும்.
Originally published on medicalxpress.com

