In conclusion, we were able to build a CNN to classify brain scans of Alzheimer’s…
- User
In conclusion, we were able to build a CNN to classify brain scans of Alzheimer’s patients into four different stages of the condition, with an accuracy (and Scott’s pi) of 0.98. There is not a large difference between ordinal vs categorical classification, although our ordinal model has a marginally higher accuracy. Moreover, after trying several pre-trained bases, a model from scratch, and a combination of the pre-trained bases with the homemade model, we conclude that using the pre-trained base EfficientNetB0 (without combining it) works best. As for the best way to deal with class imbalance in medical scans, we would recommend first splitting the test set from the data and subsequently using under-/oversampling.
The model should generalize to the MRI scans of the brain’s z-axis of individuals affected by Alzheimer’s at different stages (and also those not affected). Our biggest limitation was the minority class: given that each individual had 60 scans (taken at different points across the z-axis), this implies that our data for the minority class (488 observations) consisted of roughly only 8 individual people. Although each person contributed many scans taken at different points of the axis, it follows that the scans from one person are still more similar to each other than comparing the scans between two different individuals. Hence, given that this problem persists across the test and training set (as it was not possible to differentiate between people), it may be that our model does not generalize as well as is expected given our accuracy if we were to test it in the future with brain scans of new subjects. To this end, the next step would be to test it on such new individuals, and ideally train a model with an increase in the minority class data. Simultaneously, we must consider that the amount of samples in each class reflect the real-world prevalence of Alzheimer’s at each different stage, as a lot fewer people have “moderate” Alzheimer’s than “very mild”, for instance.
Lastly, another future consideration would be to try out different ways of implementing ordinality in CNN’s, as there are many more options to do so, some that we were not able to implement due to advanced technicality given the feasibility of our model. به فارسی ترجمه کن
- Assistant
در نتیجه، ما توانستیم یک شبکه عصبی کانولوشنال (CNN) را برای طبقهبندی اسکنهای مغزی بیماران آلزایمری به چهار مرحله مختلف از این بیماری بسازیم که دقت (و شاخص اسکات) آن 0.98 بود. تفاوت قابل توجهی بین طبقهبندی مرتبهای و طبقهبندی دستهای وجود نداشت، اگرچه مدل مرتبهای دقت بالاتری داشت. به علاوه، پس از آزمایش چندین پایگاه پیشآموزش دیده، ساختن مدل از ابتدا و ترکیب پایگاههای پیشآموزش دیده با مدل ساخته شده، به این نتیجه رسیدیم که استفاده از پایگاه پیشآموزش دیده EfficientNetB0 (بدون ترکیب کردن آن) بهترین عملکرد را دارد. در مورد بهترین روش برای مدیریت عدم تعادل کلاس در اسکنهای پزشکی، ما پیشنهاد میکنیم ابتدا مجموعه آزمایشی را از دادهها جدا کرده و سپس از زیر/اضافهکردن نمونهها استفاده کنیم.
مدل باید قابلیت تعمیم به اسکنهای MRI مغز محور z افراد مبتلا به آلزایمر در مراحل مختلف (و همچنین آنهایی که مبتلا نیستند) را داشته باشد. بزرگترین محدودیت ما کلاس اقلیت بود: با توجه به اینکه هر فرد 60 اسکن داشت (که در نقاط مختلف در محور z گرفته شده بود)، دادههای ما برای کلاس اقلیت (488 مشاهده) تقریباً تنها شامل 8 فرد جداگانه بود. گرچه هر شخص چندین اسکن در نقاط مختلف محور ارائه کرده بود، اما این به معنای آن است که اسکنهای یک شخص هنوز به یکدیگر شباهت بیشتری دارند تا مقایسه اسکنها بین دو فرد مختلف. بنابراین، با توجه به اینکه این مشکل در مجموعه آزمایشی و آموزشی وجود دارد (زیرا امکان تفکیک افراد وجود نداشت)، ممکن است مدل ما به اندازهای که انتظار میرود، تعمیمپذیری نداشته باشد اگر در آینده آن را با اسکنهای مغز افراد جدید آزمایش کنیم. به این منظور، مرحله بعدی این خواهد بود که آن را بر روی چنین افرادی آزمایش کنیم و به طور ایدهآل، مدلی با افزایش دادههای کلاس اقلیت آموزش دهیم. به طور همزمان، باید توجه داشته باشیم که تعداد نمونهها در هر کلاس منعکسکننده شیوع واقعی آلزایمر در هر مرحله مختلف است، زیرا افراد نسبت کمتری از "آلزایمر متوسط" نسبت به "آلزایمر بسیار خفیف" دارند، به عنوان مثال.
در نهایت، یکی دیگر از ملاحظات آینده این خواهد بود که روشهای مختلفی را برای پیادهسازی مرتبهبندی در CNNها آزمایش کنیم، زیرا گزینههای بیشتری برای انجام این کار وجود دارد که برخی از آنها به دلیل پیچیدگی فنی پیشرفته در دسترسپذیری مدل ما قابل پیادهسازی نبودند.