Home Teknoloji ‘Övgüye değer’ ve ‘titiz’ gibi kelimelerin aşırı kullanımı, ChatGPT’nin binlerce bilimsel çalışmada...

‘Övgüye değer’ ve ‘titiz’ gibi kelimelerin aşırı kullanımı, ChatGPT’nin binlerce bilimsel çalışmada kullanıldığını gösteriyor

33
0

Kütüphaneci Andrew Gray “çok şaşırtıcı” bir keşifte bulundu. Geçen yıl yayınlanan beş milyon bilimsel çalışmayı analiz etti ve titizlikle (%137’ye kadar), karmaşık (%117), övgüye değer (%83) ve titiz (%59) gibi belirli kelimelerin kullanımında ani bir artış tespit etti. University College London’daki kütüphaneci, bu artışa ilişkin yalnızca tek bir açıklama bulabilir: On binlerce araştırmacı, çalışmalarını yazmak veya en azından “parlatmak” için ChatGPT’yi (ya da yapay zekaya sahip diğer benzer Büyük Dil Modeli araçlarını) kullanıyor.

Çok bariz örnekler var. Çinli bilim adamlarından oluşan bir ekip, 17 Şubat’ta lityum piller üzerine bir çalışma yayınladı. Elsevier yayınevinin özel bir dergisinde yayınlanan çalışma şu şekilde başlıyor: “Elbette, burada konunuz için olası bir giriş var: Lityum-metal piller için umut verici adaylar…” Görünüşe göre yazarlar ChatGPT’den bir tanıtım istediler ve yanlışlıkla onu olduğu gibi kopyaladılar. İsrailli araştırmacılar tarafından 8 Mart’ta yayınlanan farklı bir Elsevier dergisinde yer alan ayrı bir makale şu metni içeriyor: Özetle, iki taraflı iyatrojenik yönetimi Çok üzgünüm ama gerçek zamanlı bilgilere veya hasta verilerine erişimim yok. Ben bir yapay zeka dil modeli olduğum için belirli veriler.” Ve birkaç ay önce, üç Çinli bilim adamı, sperm öncü hücreleri üzerinde yapılan bir çalışma için yapay zekayla oluşturulmuş bir tür devasa penise sahip bir farenin çılgın çizimini yayınladı.

Andrew Gray, en az 60.000 bilimsel çalışmanın (2023’te analiz edilenlerin %1’inden fazlası), 2022’nin sonunda başlatılan bir araç olan ChatGPT veya benzerinin yardımıyla yazıldığını tahmin ediyor. 41 yaşındaki İskoçyalı kütüphaneci Gray, “Birinin ChatGPT ile bir çalışmanın tamamını yazması gibi ekstrem vakaların nadir olduğunu düşünüyorum” diyor. Ona göre, çoğu durumda yapay zeka, metni “parlatmak” (yazım hatalarını tespit etmek veya İngilizceye çeviriyi kolaylaştırmak) için uygun bir şekilde kullanılıyor, ancak bazı bilim adamlarının, metnin doğruluğunu doğrulamadan ChatGPT’nin yardımını daha da ileri götürdüğü büyük bir gri alan var. sonuçlar. “Şu anda bu gri alanın ne kadar büyük olduğunu bilmek imkansız çünkü bilimsel dergiler yazarların ChatGPT kullanımını beyan etmelerini gerektirmiyor, çok az şeffaflık var” diye yakınıyor.

Yapay zeka dil modelleri, James Zou’nun Stanford Üniversitesi’ndeki ekibinin gösterdiği gibi, belirli kelimeleri orantısız bir şekilde kullanıyor. Bunlar övgüye değer, titiz, karmaşık, yenilikçi ve çok yönlü gibi olumlu çağrışımlara sahip terimler olma eğilimindedir. Zou ve meslektaşları Mart ayında, bilimsel çalışmaları inceleyenlerin, çalışmaların yayınlanmasından önce değerlendirmelerini yazmak için bu programları kullandıkları konusunda uyardılar. Stanford grubu, iki uluslararası yapay zeka konferansında sunulan çalışmaların hakem değerlendirmelerini analiz etti ve titiz kelimesinin görünme olasılığının 35 kat arttığını buldu.

Kütüphaneci Andrew Gray, University College London’dan.Londra Üniversite Koleji

Zou’nun ekibi ise Nature grubunun prestijli dergilerinde yapılan düzeltmelerde ChatGPT’nin önemli izlerini tespit edemedi. ChatGPT kullanımı daha düşük kaliteli akran incelemeleriyle ilişkilendirildi. Gray, “Bunu gerçekten endişe verici buluyorum” diye açıklıyor. University College London’daki kütüphaneci, “Bu araçları değerlendirme yazmak için kullanmanın daha düşük kaliteli sonuçlar doğurduğunu biliyorsak, bunların çalışma yazmak için nasıl kullanıldığını ve bunun ne anlama geldiğini düşünmeliyiz” diyor. Nature dergisinde yapılan bir ankete göre, ChatGPT’nin piyasaya sürülmesinden bir yıl sonra, üç bilim adamından biri, çalışmalarını yazmak için bu aracı kullandıklarını kabul etti.

Gray’in analizi, “karmaşık” kelimesinin 2023’te 109.000 araştırmada geçtiğini gösteriyor; bu, önceki yıllardaki ortalama 50.000’in iki katından fazla. “Titizlikle” terimi 2022’de yaklaşık 12.300 araştırmada yer alırken, 2023’te 28.000’in üzerine çıktı. “Övgüye değer” örnekleri ise 6.500’den neredeyse 12.000’e çıktı. Araştırmacı, halen özel bir dergide yayınlanmayı bekleyen bir taslak olan raporunun titizliğinden dolayı meslektaşlarının kendisini tebrik ettiğini söyleyerek şaka yapıyor.

Çok az sayıda çalışma yapay zeka kullanıp kullanmadıklarını rapor ediyor. Gray, ChatGPT’nin sonraki sürümlerinin, eski sürümler tarafından yazılan bilimsel makalelerle eğitildiği ve giderek daha övgüye değer, karmaşık, titiz ve hepsinden önemlisi asılsız çalışmalara yol açan “kısır döngü” tehlikesi konusunda uyarıyor.

Dokümantasyon profesörü Ángel María Delgado Vázquez, yeni analizin İngilizce dil çalışmalarına odaklandığının altını çiziyor. İspanya’nın Sevilla kentindeki Pablo de Olavide Üniversitesi’nden araştırmacı Delgado Vázquez, “Anadili İngilizce konuşmayan araştırmacılar, yazmaya yardımcı olmak ve İngilizce dilini geliştirmek için ChatGPT’yi çok kullanıyor” diyor. “Benim ortamımda insanlar ChatGPT’yi çoğunlukla ilk çeviri için, hatta bu çeviriyi doğrudan saklamak için kullanıyor” diyor. İspanyol profesör, alışılmadık terimleri kullanan yazarların kökenine ilişkin bir analiz görmek istediğini söyledi.

Yapay zekanın en sevdiği kelimelerden bir diğeri de “delve”dir. Swinburne Teknoloji Üniversitesi’nden (Avustralya) araştırmacı Jeremy Nguyen, “delve”nin tıbbi çalışmaların %0,5’inden fazlasında görüldüğünü hesapladı; ChatGPT’den önce bu oran %0,04’ten azdı. Binlerce araştırmacı aniden araştırmaya başlıyor.

Kütüphaneci Andrew Gray, insanlığın bu yeni, titizlikle yapay dilden etkilenme riski konusunda uyarıyor. Nguyen bizzat sosyal ağda bunu kabul etti. 8 Nisan’da resmi ChatGPT hesabı

Kütüphaneci Andrew Gray, daha geniş bir toplumun bu titizlikle yapay yeni dilden etkilenme riski olduğu konusunda uyarıyor. Nguyen, sosyal ağ X’te bunun kendisinin de başına geldiğini itiraf etti: “Aslında kendimi son zamanlarda kendi dilimde “delve” kelimesini kullanırken buluyorum; bunun nedeni muhtemelen GPT ile konuşmaya çok fazla zaman ayırmam.” 8 Nisan’da X’in resmi ChatGPT hesabı şu açıklamayı yaptı: “Ne diyebilirim ki araştırmayı seviyorum?”

EL PAÍS USA Edition’dan daha fazla İngilizce haber almak için haftalık bültenimize kaydolun

Kaynak

LEAVE A REPLY

Please enter your comment!
Please enter your name here