MIT ve Dana-Farber, tıbbi araştırmalardaki kod paylaşımını inceleyerek önemli sonuçlara ulaştı.
Araştırmanın Amacı ve Yöntemi
MIT ve Dana-Farber Cancer Institute liderliğindeki uluslararası bir ekip, klinik tahmin çalışmalarında kod paylaşımını inceleme amacıyla yola çıktı. Araştırma, 4,000’e yakın tıbbi çalışmayı değerlendirerek, bu çalışmaların nasıl kod paylaştığını anlamayı hedefliyor. Kod ve verilerin paylaşımı, bir araştırmanın ne kadar güvenilir olduğunu belirlemek için kritik öneme sahiptir.
Tom Pollard, MIT’nin Computational Physiology Laboratuvarı’ndan, “Araştırmalar, verilerin hazırlanması, modellerin geliştirilmesi ve performansın değerlendirilmesi gibi birçok seçim içerir,” diyerek bu süreçlerin önemine dikkat çekiyor. Araştırmacıların, bu seçimlerin sonuçları nasıl etkilediğini anlayabilmesi için açık verilere erişimi olmalıdır.
Kod Paylaşımında Mevcut Durum
Yapılan inceleme, kod paylaşımının hala yaygın olmadığını ortaya koydu. Araştırmaların yalnızca %12’si kod paylaştığını bildiriyor. Kod paylaşıldığında, repository’lerin içeriklerinin büyük bir çeşitlilik gösterdiği gözlemlendi. Bazı repository’ler oldukça iyi organize edilirken, diğerleri neredeyse hiç rehberlik sağlamıyordu.
Thomas Sounack, kod paylaşımının önemini vurgulayarak, “İyi bir kod paylaşımı, kodun ne yaptığını anlamak için yeterli bilgi sunmak demektir,” dedi. Araştırmalardaki kod paylaşım oranlarının dergiler ve ülkeler arasında büyük farklılıklar gösterdiği de kaydedildi.
LLM Teknolojisinin Rolü
Araştırmacılar, büyük dil modelleri (LLM) kullanarak, kodun paylaşımına dair beyanları incelemek için neredeyse 4,000 makale üzerinde çalışmalarını yürüttü. Bu süreç, yalnızca bağlantıların varlığını kontrol etmekle kalmadı, aynı zamanda repository’lerin dokümantasyon eksiklikleri ve yazılım gereksinimleri gibi özelliklerini de değerlendirdi.
Pollard, LLM’lerin düzensiz bilgileri işleme konusundaki yeteneklerinin araştırmacılara büyük kolaylık sağladığını belirtti. Bu sayede, kodun paylaşımını daha detaylı bir şekilde inceleme fırsatı buldular.
Standartların Belirlenmesi
TRIPOD-Code, klinik tahmin modellerinin geliştirilmesi ve değerlendirilmesi süreçlerini açıklamak için geliştirilen bir kılavuz niteliği taşıyor. Araştırmacılar, paylaştıkları kodların hangi unsurlarının temel olarak kabul edilmesi gerektiğine dair bir konsensüs oluşturmaya çalışıyor.
Pollard, “Araştırmacılara kod paylaşımı konusunda pratik rehberlik vermek istiyoruz,” diyerek, dergilerin yazarlarına daha net beklentiler iletebilmesi için bu sürecin önemini vurguladı. Yapılan inceleme, bu tür tartışmaları bilgilendirmek için değerli veriler sunmaktadır.
