medvisМедицинская визуализацияMedical Visualization1607-07632408-9516RDS-Media Ltd.10.24835/1607-0763-1315medvis-1315Research ArticleТЕХНОЛОГИИ ЛУЧЕВОЙ ДИАГНОСТИКИRADIOLOGICAL TECHNOLOGIESОценка межэкспертной согласованности врачей-рентгенологов в диагностике ишемического инсульта в бассейне средней мозговой артерии с помощью компьютерной томографииInterexpert agreement between neuroradiologists in the diagnosis of middle cerebral artery stroke by computed tomographyhttps://orcid.org/0000-0002-0416-493XАндроповаП. Л.AndropovaP. L.

Андропова Полина Леонидовна – врач КТ-кабинета рентгеновского отделения

199034 Санкт-Петербург, Университетская наб., 7-9; 

195257 Санкт-Петербург, ул. Вавиловых, д. 14, литера А

Polina L. Andropova – radiologist of the X-ray department

7-9, Universitetskaya Embankment, St. Petersburg 199034; 14, Vavilovykh str., St. Petersburg 195257

polin.and@icloud.comhttps://orcid.org/0000-0003-3251-4084ГавриловП. В.GavrilovP. V.

Гаврилов Павел Владимирович – канд. мед. наук, ведущий научный сотрудник, руководитель направления “лучевая диагностика”

191036 Санкт-Петербург, Лиговский пр., д. 2-4

Pavel V. Gavrilov – Cand. of Sci. (Med.), leading Researcher, Head of the Department of Radiology 

2-4, Ligovsky prospect, St. Petersburg 191036

spbniifrentgen@mail.ruhttps://orcid.org/0000-0001-7143-2634КазанцеваИ. П.KazantsevaI. P.

Казанцева Инга Павловна – врач-рентгенолог отделения компьютерной

193079 Санкт-Петербург, Народная ул., 21, к. 2

Inga P. Kazantseva – radiologist of the CT department 

21-2, Narodnaya str., St. Petersburg 193079

errion.ko@gmail.comhttps://orcid.org/0000-0002-2997-0495ДомиенкоО. М.DomienkoO. M.

Домиенко Ольга Михайловна – заведующая рентгеновским отделением

195257 Санкт-Петербург, ул. Вавиловых, д. 14, литера А

Olga M. Domienko – Head of the X-ray department 

14, Vavilovykh str., St. Petersburg 195257

domienkoom@eliz-spb.ruhttps://orcid.org/0000-0002-1489-5058НаркевичА. Н.NarkevichA. N.

Наркевич Артем Николаевич – доктор мед. наук, доцент, декан лечебного факультета, заведующий лабораторией медицинской кибернетики и управления в здравоохранении, заведующий кафедрой медицинской кибернетики и информатики 

660022 Красноярский край, Красноярск, ул. Партизана Железняка, 1

Artem N. Narkevich – Doct. of Sci. (Med.), Associate Professor, Dean of the Faculty of Medicine, Head of the Laboratory of Medical Cybernetics and Management in Healthcare, Head of the Department of Medical Cybernetics and Informatics 

1, Partizan Zheleznyak str., Krasnoyarsk 660022

narkevichart@gmail.comhttps://orcid.org/0000-0003-2406-6349КолесниковаП. А.KolesnikovaP. A.

Колесникова Полина Алексеевна – аспирант

119334 Москва, ул. Косыгина, д. 4

Polina A. Kolesnikova – postgraduate (PhD) student 

4, Kosygina str., Moscow 119334

larionova_pa@gkl-kemerovo.ruhttps://orcid.org/0000-0001-5804-2279ГребенкинаЕ. К.GrebenkinaE. K.

Гребенкина Елизавета Константиновна – врач-невролог Регионального сосудистого центра 

195257 Санкт-Петербург, ул. Вавиловых, д. 14, литера А

Elizaveta K. Grebenkina – neurologist of the Regional Vascular Center

14, Vavilovykh str., St. Petersburg 195257

janehomjak@yandex.ruhttps://orcid.org/0000-0002-9381-7874ТарасовН. В.TarasovN. V.

Тарасов Николай Викторович – анестезиолог-реаниматолог

195257 Санкт-Петербург, ул. Вавиловых, д. 14, литера А

Nikolay V. Tarasov – anesthesiologist-resuscitator 

14, Vavilovykh str., St. Petersburg 195257

nikolaytar@rambler.ruhttps://orcid.org/0000-0003-2949-6268СергееваТ. В.SergeevaT. V.

Сергеева Татьяна Васильевна – канд. мед. наук, заместитель главного врача по неврологии ГБУЗ “Елизаветинская больница”; руководитель Регионального сосудистого центра; доцент кафедры медицинской реабилитации и спортивной медицины ФП и ДПО ФГБОУ ВО СПбГПМУ Минздрава России; ассистент кафедры нейрохирургии и неврологии медицинского факультета ФГБОУ ВО “Санкт-Петербургский государственный университет”

199034 Санкт-Петербург, Университетская наб., 7-9;

195257 Санкт-Петербург, ул. Вавиловых, д. 14, литера А;

194100 Санкт-Петербург, ул. Литовская, д. 2

Tatyana V. Sergeeva – Cand. of Sci. (Med.), Deputy Chief Physician for neurology, Head, Regional Vascular Center of the St. Petersburg City Hospital of the Holy Martyr Elizabeth, Associate Professor of the Department of Medical Rehabilitation and Sports Medicine of the St. Petersburg State Pediatric Medical University, Assistant Professor of the Department of Neurosurgery and Neurology of Saint Petersburg State University

7-9, Universitetskaya Embankment, St. Petersburg 199034; 14, Vavilovykh str., St. Petersburg 195257; 2, Litovskaya str., St. Petersburg 194100

tatyana_serg@mail.ruhttps://orcid.org/0000-0003-4871-2341ТрофимоваТ. Н.TrofimovaT. N.

Трофимова Татьяна Николаевна – член-корр. РАН, доктор мед. наук, профессор, главный внештатный специалист по лучевой и инструментальной диагностике СЗФО РФ и Комитета по здравоохранению Санкт-Петербурга

199034 Санкт-Петербург, Университетская наб., 7-9

Tat′yana N. Trofimova – Corresponding Member of the Russian Academy of Sciences, Doct. of Sci. (Med.), Professor, Chief Freelance Specialist in Radiology and Instrumental Diagnostics of the Northwestern Federal District of the Russian Federation and the Committee for Health

7-9, Universitetskaya Embankment, St. Petersburg 199

TTrofimova@sogaz-clinic.ruФГБОУ ВО “Санкт-Петербургский государственный университет”; ГБУЗ “Елизаветинская больница”РоссияSt. Petersburg State University; St. Petersburg City Hospital of the Holy Martyr ElizabethRussian FederationФГБУ “ Санкт-Петербургский научно-исследовательский институт фтизиопульмонологии” Минздрава РоссииРоссияSaint-Petersburg State Research Institute of PhthisiopulmonologyRussian FederationГБУЗ “Госпиталь для ветеранов войн”РоссияSt. Petersburg City Hospital for the war veteransRussian FederationГБУЗ “Елизаветинская больница”РоссияSt. Petersburg City Hospital of the Holy Martyr ElizabethRussian FederationФГБОУ ВО “Красноярский государственный медицинский университет им. профессора В.Ф. Войно-Ясенецкого” Минздрава РоссииРоссияKrasnoyarsk State Medical University named after Prof. V.F. Voino-YasenetskyRussian FederationФГБУН “Институт биохимической физики им. Н.М. Эмануэля” Российской академии наукРоссияEmanuel Institute of Biochemical Physics of the Russian Academy of SciencesRussian FederationФГБОУ ВО “Санкт-Петербургский государственный университет”; ГБУЗ “Елизаветинская больница”; ФГБОУ ВО “Санкт-Петербургский государственный педиатрический медицинский университет”РоссияSt. Petersburg State University; St. Petersburg City Hospital of the Holy Martyr Elizabeth; St. Petersburg State Pediatric Medical UniversityRussian FederationФГБОУ ВО “Санкт-Петербургский государственный университет”РоссияSt. Petersburg State UniversityRussian Federation202306042023274159169Copyright © Андропова П.Л., Гаврилов П.В., Казанцева И.П., Домиенко О.М., Наркевич А.Н., Колесникова П.А., Гребенкина Е.К., Тарасов Н.В., Сергеева Т.В., Трофимова Т.Н., 20232023Андропова П.Л., Гаврилов П.В., Казанцева И.П., Домиенко О.М., Наркевич А.Н., Колесникова П.А., Гребенкина Е.К., Тарасов Н.В., Сергеева Т.В., Трофимова Т.Н.Andropova P.L., Gavrilov P.V., Kazantseva I.P., Domienko O.M., Narkevich A.N., Kolesnikova P.A., Grebenkina E.K., Tarasov N.V., Sergeeva T.V., Trofimova T.N.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://medvis.rdsmedia.ru/jour/article/view/1315Цель исследования

Цель исследования: определение показателей диагностической эффективности врачей с различным стажем в ургентной нейрорадиологии, а также уровня их согласия в отношении КТ-признаков ишемического инсульта.

Материал и методы

Материал и методы. За 2021 г. из базы городской клинической больницы Санкт-Петербурга были ретроспективно отобраны 100 пациентов, которым были проведены бесконтрастная КТ, КТ-ангиография брахиоцефальных артерий и артерий головного мозга, а также КТ-перфузия. У 50 пациентов был подтвержден ишемический инсульт в бассейне средней мозговой артерии. Также в исследование рандомно включены 50 пациентов, у которых данный диагноз был исключен, в том числе на основе динамического наблюдения в рамках дальнейшей клинической оценки и контрольного КТ-исследования головного мозга. Все 100 исследований были проанализированы 21 рентгенологом, которые независимо друг от друга оценивали каждое исследование на наличие КТ-признаков ишемического инсульта. Статистический анализ включал определение коэффициента каппа Флейсса (κ) относительно согласия по каждому признаку ишемического инсульта, специфичности, чувствительности и точности выявления данных изменений.

Результаты

Результаты. Стаж работы врачей экстренной нейрорадиологии в Региональном сосудистом центре влияет как на диагностическую эффективность, так и на согласованность в отношении большинства КТ-признаков ишемического инсульта. В то же время стаж не влияет на диагностическую эффективность врачей, не имеющих опыта в оценке инсульта. Как наиболее высокоспецифичный и воспроизводимый признак ишемического инсульта был выявлен симптом гиперденсной средней мозговой артерии, а самым неоднозначным диагностическим признаком оказался симптом сглаженности корковых борозд. При этом все врачи независимо от стажа и опыта работы в ургентной нейрорадиологии склонны к гипердиагностике.

Заключение

Заключение. Необходим дальнейший поиск инструментов и решений, способных нивелировать межэкспертную вариативность в отношении оценки КТ-признаков ишемического инсульта, поскольку данная проблема имеет высокую значимость в клинической практике.

Background

Background. To evaluate the diagnostic accuracy of radiologists with a wide range of experience and training in emergency neuroradiology and other specialty hospitals, as well as the level of inter-experts’ agreement regarding CT signs of ischemic stroke.

Material and methods

Material and methods. Our study included a retrospective cohort of 100 patients who underwent NCCT, CT angiography (mCTA) and CT perfusion in St. Petersburg clinical hospital. Fifty patients had confirmed middle cerebral artery ischemic stroke. The study also randomly included fifty patients in whom this diagnosis was excluded, including on the basis of dynamic follow-up as part of further clinical evaluation and follow-up CT scan of the brain. All 100 CT were reviewed by 21 radiologists who independently assessed each study for CT evidence of ischemic stroke. Statistical analysis included the Kappa-Fleiss coefficient ( ) calculation of agreement for each sign of ischemic stroke, specificity, sensitivity, and accuracy of detection of these changes.

Results

Results. The staff radiologist’s mean experience in emergency neuroradiology affects both diagnostic performance and consistency for detection of most CT features of ischemic stroke. At the same time, experience does not affect the diagnostic efficiency of radiologists with no experience in stroke assessment. The most highly specific and reproducible sign of ischemic stroke was the hyperdense middle cerebral artery sign, and the most ambiguous diagnostic sign was the gyral effacement. At the same time, all radiologists, regardless of length of service record and experience in emergency neuroradiology, are prone to over-diagnosis.

Conclusion

Conclusion. Further search for tools and solutions is needed to level out interexpert variability regarding assessment of ischemic CT signs, since this problem has high clinical importance.

ишемический инсульткомпьютерная томографияранние признаки ишемииASPECTSмежэкспертное согласиеischemic strokecomputed tomographythe signs of early ischemiaASPECTSinter-expert agreementReferencesКлинические рекомендации “Ишемический инсульт и транзиторная ишемическая атака у взрослых 2021”. https://cr.minzdrav.gov.ru/recomend/171_2Clinical guidelines. Ischemic stroke and transient ischemic attack in adults. 2021 (In Russian)Akbarzadeh M.A., Sanaie S., Kuchaki Rafsanjani M., Hosseini M.-S. Role of imaging in early diagnosis of acute ischemic stroke: a literature review. Egypt J. Neurol. Psychiat. Neurosurg. 2021; 57: 175. https://doi.org/10.1186/s41983-021-00432-yAkbarzadeh M.A., Sanaie S., Kuchaki Rafsanjani M., Hosseini M.-S. Role of imaging in early diagnosis of acute ischemic stroke: a literature review. Egypt J. Neurol. Psychiat. Neurosurg. 2021; 57: 175. https://doi.org/10.1186/s41983-021-00432-yGács G., Fox A.J., Barnett H.J. et al. CT visualization of intracranial arterial thromboembolism. Stroke. 1983; 14 (5): 756–762. https://doi.org/10.1161/01.str.14.5.756Gács G., Fox A.J., Barnett H.J. et al. CT visualization of intracranial arterial thromboembolism. Stroke. 1983; 14 (5): 756–762. https://doi.org/10.1161/01.str.14.5.756Barber P.A., Demchuk A.M., Hudon M.E. et al. Hyperdense sylvian fissure MCA “dot” sign: A CT marker of acute ischemia. Stroke. 2001; 32 (1): 84–88. https://doi.org/10.1161/01.str.32.1.84Barber P.A., Demchuk A.M., Hudon M.E. et al. Hyperdense sylvian fissure MCA “dot” sign: A CT marker of acute ischemia. Stroke. 2001; 32 (1): 84–88. https://doi.org/10.1161/01.str.32.1.84Leary M.C., Kidwell C.S., Villablanca J.P. et al. Validation of computed tomographic middle cerebral artery “dot” sign: an angiographic correlation study. Stroke. 2003; 34 (11): 2636–4260. https://doi.org/10.1161/01.STR.0000092123.00938.83Leary M.C., Kidwell C.S., Villablanca J.P. et al. Validation of computed tomographic middle cerebral artery “dot” sign: an angiographic correlation study. Stroke. 2003; 34 (11): 2636–4260. https://doi.org/10.1161/01.STR.0000092123.00938.83Koo C.K., Teasdale E., Muir K.W. What constitutes a true hyperdense middle cerebral artery sign? Cerebrovasc. Dis. 2000; 10 (6): 419–423. https://doi.org/10.1159/000016101Koo C.K., Teasdale E., Muir K.W. What constitutes a true hyperdense middle cerebral artery sign? Cerebrovasc. Dis. 2000; 10 (6): 419–423. https://doi.org/10.1159/000016101Hsu K.C., Kao H.W., Chen S.J. Backward somersault as a cause of childhood stroke: a case report of isolated middle cerebral artery dissection in an adolescent boy. Am. J. Emerg. Med. 2008; 26 (4): 519.e3–5. https://doi.org/10.1016/j.ajem.2007.08.028Hsu K.C., Kao H.W., Chen S.J. Backward somersault as a cause of childhood stroke: a case report of isolated middle cerebral artery dissection in an adolescent boy. Am. J. Emerg. Med. 2008; 26 (4): 519.e3–5. https://doi.org/10.1016/j.ajem.2007.08.028Jha B., Kothari M. Pearls & oy-sters: hyperdense or pseudohyperdense MCA sign: a Damocles sword? Neurology. 2009; 72 (23): e116–117. https://doi.org/10.1212/WNL.0b013e3181a92b3bJha B., Kothari M. Pearls & oy-sters: hyperdense or pseudohyperdense MCA sign: a Damocles sword? Neurology. 2009; 72 (23): e116–117. https://doi.org/10.1212/WNL.0b013e3181a92b3bSimard J.M., Kent T.A., Chen M. et al. Brain oedema in focal ischaemia: molecular pathophysiology and theoretical implications. Lancet Neurol. 2007; 6 (3): 258–268. https://doi.org/10.1016/S1474-4422(07)70055-8Simard J.M., Kent T.A., Chen M. et al. Brain oedema in focal ischaemia: molecular pathophysiology and theoretical implications. Lancet Neurol. 2007; 6 (3): 258–268. https://doi.org/10.1016/S1474-4422(07)70055-8Ho M.L., Rojas R., Eisenberg R.L. Cerebral edema. Am. J. Roentgenol. 2012; 199 (3): W258–273. https://doi.org/10.2214/AJR.11.8081Ho M.L., Rojas R., Eisenberg R.L. Cerebral edema. Am. J. Roentgenol. 2012; 199 (3): W258–273. https://doi.org/10.2214/AJR.11.8081Mainali .S, Wahba M., Elijovich L. Detection of Early Ischemic Changes in Noncontrast CT Head Improved with “Stroke Windows”. ISRN Neurosci. 2014; 2014: 654980. https://doi.org/10.1155/2014/654980Mainali .S, Wahba M., Elijovich L. Detection of Early Ischemic Changes in Noncontrast CT Head Improved with “Stroke Windows”. ISRN Neurosci. 2014; 2014: 654980. https://doi.org/10.1155/2014/654980Govind A.S., Sukumar S., Dkhar W. Grading of cerebral infarction using CT-Hounsfield unit to report the Hounsfield unit in acute, Subacute and chronic stroke. Int. J. Curr. Res. 2015; 7 (7): 17874–17878.Govind A.S., Sukumar S., Dkhar W. Grading of cerebral infarction using CT-Hounsfield unit to report the Hounsfield unit in acute, Subacute and chronic stroke. Int. J. Curr. Res. 2015; 7 (7): 17874–17878.Mokin M., Primiani CT., Ren Z. et al. Endovascular treatment of middle cerebral artery M2 occlusion strokes: Clinical and procedural predictors of outcomes. Neurosurgery. 2017; 81 (5): 795–802. https://doi.org/10.1093/neuros/nyx060Mokin M., Primiani CT., Ren Z. et al. Endovascular treatment of middle cerebral artery M2 occlusion strokes: Clinical and procedural predictors of outcomes. Neurosurgery. 2017; 81 (5): 795–802. https://doi.org/10.1093/neuros/nyx060Butcher K.S., Lee S.B., Parsons M.W. et al. Differential prognosis of isolated cortical swelling and hypoattenuation on CT in acute stroke. Stroke. 2007; 38 (3): 941–947. https://doi.org/10.1161/01.STR.0000258099.69995.b6Butcher K.S., Lee S.B., Parsons M.W. et al. Differential prognosis of isolated cortical swelling and hypoattenuation on CT in acute stroke. Stroke. 2007; 38 (3): 941–947. https://doi.org/10.1161/01.STR.0000258099.69995.b6Haussen D.C., Lima A., Frankel M. et al. Sulcal effacement with preserved gray-white junction: a sign of reversible ischemia. Stroke. 2015; 46 (6): 1704–1706. https://doi.org/10.1161/STROKEAHA.115.009304Haussen D.C., Lima A., Frankel M. et al. Sulcal effacement with preserved gray-white junction: a sign of reversible ischemia. Stroke. 2015; 46 (6): 1704–1706. https://doi.org/10.1161/STROKEAHA.115.009304Lev M.H., Farkas J., Gemmete J.J. et al. Acute stroke: improved nonenhanced CT detection--benefits of soft-copy interpretation by using variable window width and center level settings. Radiology. 1999; 213 (1): 150–155. https://doi.org/10.1148/radiology.213.1.r99oc10150Lev M.H., Farkas J., Gemmete J.J. et al. Acute stroke: improved nonenhanced CT detection--benefits of soft-copy interpretation by using variable window width and center level settings. Radiology. 1999; 213 (1): 150–155. https://doi.org/10.1148/radiology.213.1.r99oc10150Kobkitsuksakul C., Tritanon O., Suraratdecha V. Inter-observer agreement between senior radiology resident, neuroradiology fellow, and experienced neuroradiologist in the rating of Alberta Stroke Program Early Computed Tomography Score (ASPECTS). Diagn. Interv. Radiol. 2018; 24 (2): 104–107. https://doi.org/10.5152/dir.2018.17336Kobkitsuksakul C., Tritanon O., Suraratdecha V. Inter-observer agreement between senior radiology resident, neuroradiology fellow, and experienced neuroradiologist in the rating of Alberta Stroke Program Early Computed Tomography Score (ASPECTS). Diagn. Interv. Radiol. 2018; 24 (2): 104–107. https://doi.org/10.5152/dir.2018.17336Kumar R., Indrayan A. Receiver operating characteristic (ROC) curve for medical researchers. Indian Pediatr. 2011; 48 (4): 277–287. https://doi.org/10.1007/s13312-011-0055-4Kumar R., Indrayan A. Receiver operating characteristic (ROC) curve for medical researchers. Indian Pediatr. 2011; 48 (4): 277–287. https://doi.org/10.1007/s13312-011-0055-4Hallgren K.A. Computing Inter-Rater Reliability for Observational Data: An Overview and Tutorial. Tutor Quant. Methods Psychol. 2012; 8 (1): 23–34. https://doi.org/10.20982/tqmp.08.1.p023Hallgren K.A. Computing Inter-Rater Reliability for Observational Data: An Overview and Tutorial. Tutor Quant. Methods Psychol. 2012; 8 (1): 23–34. https://doi.org/10.20982/tqmp.08.1.p023Farzin B., Fahed R., Guilbert F. et al. Early CT changes in patients admitted for thrombectomy: Intrarater and interrater agreement. Neurology. 2016; 87 (3): 249–256. https://doi.org/10.1212/WNL.0000000000002860Farzin B., Fahed R., Guilbert F. et al. Early CT changes in patients admitted for thrombectomy: Intrarater and interrater agreement. Neurology. 2016; 87 (3): 249–256. https://doi.org/10.1212/WNL.0000000000002860Gupta A.C., Schaefer P.W., Chaudhry Z.A. et al. Inter-observer reliability of baseline noncontrast CT Alberta Stroke Program Early CT Score for intra-arterial stroke treatment selection. Am. J. Neuroradiol. 2012; 33 (6): 1046–1049. https://doi.org/10.3174/ajnr.A2942Gupta A.C., Schaefer P.W., Chaudhry Z.A. et al. Inter-observer reliability of baseline noncontrast CT Alberta Stroke Program Early CT Score for intra-arterial stroke treatment selection. Am. J. Neuroradiol. 2012; 33 (6): 1046–1049. https://doi.org/10.3174/ajnr.A2942Wardlaw J.M., Mielke O. Early signs of brain infarction at CT: observer reliability and outcome after thrombolytic treatment-systematic review. Radiology. 2005; 235 (2): 444–453. https://doi.org/10.1148/radiol.2352040262Wardlaw J.M., Mielke O. Early signs of brain infarction at CT: observer reliability and outcome after thrombolytic treatment-systematic review. Radiology. 2005; 235 (2): 444–453. https://doi.org/10.1148/radiol.2352040262Dippel D.W., Du Ry van Beest Holle M., van Kooten F. et al. The validity and reliability of signs of early infarction on CT in acute ischaemic stroke. Neuroradiology. 2000; 42 (9): 629–633. https://doi.org/10.1007/s002340000369Dippel D.W., Du Ry van Beest Holle M., van Kooten F. et al. The validity and reliability of signs of early infarction on CT in acute ischaemic stroke. Neuroradiology. 2000; 42 (9): 629–633. https://doi.org/10.1007/s002340000369Grotta J.C., Chiu D., Lu M. et al. Agreement and variability in the interpretation of early CT changes in stroke patients qualifying for intravenous rtPA therapy. Stroke. 1999; 30 (8): 1528–1533. https://doi.org/10.1161/01.str.30.8.1528Grotta J.C., Chiu D., Lu M. et al. Agreement and variability in the interpretation of early CT changes in stroke patients qualifying for intravenous rtPA therapy. Stroke. 1999; 30 (8): 1528–1533. https://doi.org/10.1161/01.str.30.8.1528Андропова П.Л., Гаврилов П.В., Казанцева И.П., Кочанова Н.И., Наркевич А.Н., Трофимова Т.Н. Оценка межэкспертной согласованности при использовании ASPECTS врачами ургентной нейрорадиологии с различным стажем. Радиология– практика. 2022; 5: 10–25. https://doi.org/10.52560/2713-0118-2022-5-10-25Andropova P.L., Gavrilov P.V., Kazantseva I.P., Kochanova N.I., Narkevich A.N., Trofimova T.N. Interexpert Agreement Between Emergency Neuroradiologists with Different Levels of Experience in the Rating of ASPECTS. Radiology-Practice. 2022; 5: 10–25. https://doi.org/10.52560/2713-0118-2022-5-10-25 (In Russian)

The authors declare that there are no conflicts of interest present.