Biyotıp makalelerinin yüzde 90'ı yapay zeka desteğiyle yazılıyor

Yeni bir araştırmaya göre, biyotıp alanındaki açık erişimli bilimsel makalelerin yaklaşık yüzde 89'u, yapay zeka dil modelleri kullanılarak yazılıyor veya düzenleniyor. Belçikalı ve Alman bilim insanlarının gerçekleştirdiği çalışma, bu oranın önceki tahminlerden çok daha yüksek olduğunu gösteriyor. Ancak bulgular henüz bağımsız uzmanlarca doğrulanmadı.

Çoğu insan, yapay zekanın bir bilimsel makaleyi tek seferde baştan sona yazdığını düşünse de, yeni analiz, makine izlerinin metne eşit dağılmadığını ortaya koyuyor. Yapay zeka kullanımı en çok, sonuçların tartışıldığı bölümlerde görülüyor. Buna karşılık, araştırmacılar yöntem bölümünü yazarken algoritmalara çok daha az güveniyor.

Dil modellerinin yükselişi

Dil modellerinin hızlı yükselişi 2022'nin sonunda başladı ve bilim insanlarına da güçlü bir araç sağladı. Özellikle ana dili İngilizce olmayan araştırmacılar, taslaklarını düzenletmek ve çevirtmek için bu teknolojiye sıkça başvuruyor. Akademik camia ise, makine tarafından üretilen metinlerin uydurma referanslar içerebileceği ve bilimsel düşünceyi tekdüzeleştirebileceği endişesini taşıyor. Politikacıların bu sorunla başa çıkabilmesi için dil modellerinin gerçek yaygınlığına dair net verilere ihtiyaç duyuluyor.

Gent Üniversitesi'nden bilgisayar bilimci Dmitry Kobak ve ekibi, bu soruyu yanıtlamak için kapsamlı bir analiz gerçekleştirdi. Önceki çalışmalar metin tanıma yazılımlarına dayanıyordu ve çoğu zaman çelişkili sonuçlar veriyordu. Yeni araştırmada ise hatalardan kaçınmak için PubMed Central veri tabanındaki 2017-2025 yılları arasında yayımlanmış yaklaşık 1,2 milyon biyotıp makalesinin tam metni incelendi.

Yöntem bölümünde daha az yapay zeka

Sonuçlara göre, yapay zeka desteğiyle hazırlanan makalelerin oranı Aralık 2025'e kadar yüzde 89'a ulaştı. Bu, önceki tahminlerin (genellikle yüzde 20'nin altında) çok üzerinde. Ancak yapay zeka kullanımı makale boyunca eşit değil. En yoğun kullanım, sonuçların tartışıldığı bölümlerde; kısa bölümlerin analizinde bu oran yüzde 70'e kadar çıkıyor. Sonuç ve giriş bölümlerinde yapay zeka izlerine sırasıyla yaklaşık yüzde 60 ve yüzde 46 oranında rastlanıyor. En az başvuru ise yöntem bölümünde; kısa bölümlerde bu oran yüzde 32'de kalıyor.

Bu fark, yöntem bölümünün doğasından kaynaklanıyor; laboratuvar protokollerinin ve sayısal verilerin son derece hassas sunulması gerekiyor. Ancak veriler, yöntem bölümünün tamamında bile metnin yarısından fazlasının dil modelinden geçtiğini gösteriyor. Bu çelişki, araştırmacıların yöntem bölümünde metni satır satır değil, sadece belirli kısımları düzelttiğine işaret ediyor.

Araştırmacılar, sonuçlara ulaşmak için yüzlerce kelimenin bilimsel metinlerdeki sıklığını izledi. Dil modelleri, 'delve' gibi bazı fiilleri ve 'potential' gibi sıfatları tercih ediyor. Bu kelimeler metinde alışılmadık sıklıkta geçiyorsa, makinenin kullanıldığı anlaşılıyor. Ekip, yapay zeka öncesi dönemdeki kelime sıklıklarını hesaplayarak güncel verilerle karşılaştırdı.

Coğrafi analiz ise, uluslararası bilim dilinin İngilizce olması nedeniyle yapay zekanın bir dil ekolayzeri olarak işlev gördüğünü doğruluyor. Güney Kore ve Çin'deki araştırmaların yüzde 80'inden fazlası yapay zeka desteğiyle yazılırken, İngiliz araştırmacıların oranı üçte birin altında kalıyor.

Çalışmanın bir sınırlaması, algoritmanın insanların bilinçsiz olarak yapay zeka stilini taklit etmeye başlaması durumunda yanılabileceği. Ayrıca yazarların yapay zekaya özgü kelimeleri bilinçli olarak kullanmaktan kaçınması da sonuçları etkileyebilir. Her iki durumun etkisini ölçmek ise şu an zor. Araştırmanın ön baskısı arXiv platformunda yayınlandı.