ÖZ
Amaç
Chat Generative Pre-Trained Transformer 4o (ChatGPT-4o) gibi büyük dil modelleri, hem hastalar hem de sağlık profesyonelleri tarafından sağlıkla ilgili bilgilere erişmek amacıyla giderek daha fazla kullanılmaktadır. Miyastenia gravis (MG), uzun süreli tedavi gerektiren kronik bir otoimmün nöromüsküler hastalıktır. Bu nedenle, MG hakkında doğru tıbbi bilgilere zamanında erişim önemlidir. Bu çalışma, ChatGPT-4o tarafından MG ile ilgili olarak hastalar ve nöroloji asistanları tarafından yöneltilen İngilizce ve Türkçe sorulara verilen yanıtların doğruluk, bütünlük, açıklık, hedef kitleye uygunluk, yanlış bilgilendirme veya zarar riski ile okunabilirlik açısından değerlendirilmesini amaçlamıştır.
Gereç ve Yöntem
İngilizce ve Türkçe olarak, hastalar ve nöroloji asistanları tarafından MG hakkında sıkça sorulan sorulardan oluşan, patofizyoloji ve semptomlar, tanı, tedavi, prognoz ve günlük yaşam yönetimini kapsayan 20 soruluk dört soru seti oluşturuldu. Her bir set için ChatGPT-4o yanıtları, 29 Mart 2025 tarihinde ayrı oturumlarda üretildi. İki nörolog, yanıtları beş farklı alanda 5 puanlık Likert ölçeği kullanarak birbirinden bağımsız olarak değerlendirdi. Okunabilirlik; İngilizce için Flesch okuma kolaylığı skoru, Flesch-Kincaid sınıf düzeyi ve Gunning-Fog indeksi ile, Türkçe için ise Ateşman okunabilirlik indeksi ile değerlendirildi.
Bulgular
Doğruluk, açıklık, uygunluk ve yanlış bilgilendirme ya da zarar verme riski açısından puanlar her iki dilde de tutarlı şekilde 4’ün üzerinde olup, açıklık tüm yanıtlarda 5 olarak değerlendirilmiştir. Bütünlük ise, özellikle asistanlara yönelik Türkçe yanıtlarda en düşük puanları (3,5-5,0) almıştır. Okunabilirlik Türkçe’de daha yüksek bulunmuştur. Asistanlara yönelik İngilizce yanıtlar son derece zor okunabilirken, hastalara yönelik olanlar “zor” ile “çok zor” arasında değişmiştir. İngilizce ve Türkçe yanıtlar arasında; ayırıcı tanı listesi, tedavi seçenekleri, kontrendike ilaçlar ve timektomi endikasyonları gibi belirli içeriklerde çeşitli tutarsızlıklar gözlemlenmiştir.
Sonuç
ChatGPT-4o, MG ile ilgili sorulara her iki dilde de genel olarak yüksek kaliteli yanıtlar üretmiştir. Ancak dile özgü tutarsızlıklar ve içerik eksiklikleri, özellikle çok dilli ve profesyonel kullanım bağlamlarında modelin daha da geliştirilmesi gerektiğini ortaya koymaktadır.
