Tel Aviv merkezli QED Science adlı girişim, 57.000'den fazla bioRxiv ön baskısını sıralamak ve bir 'ilk %1' listesi çıkarmak için bir yapay zekâ sistemi kullandı — şirketin ısrarla vurguladığı gibi, bu liste yalnızca bilimsel değere göre seçildi. Nature'ın 10 Ağustos'ta yayımladığı bir röportajda anlatılan bu çalışma, makinelerin bilimi insanlar henüz incelemeden derecelendirip derecelendiremeyeceği tartışmasını yeniden alevlendirdi.
QED'nin aracı, yayımlanmadan önce makaleleri okuyor ve iddialarının özgünlüğünü ve geçerliliğini puanlıyor; eğitiminin bir bölümü, yayınlanmış literatürün nadiren sergilediği, hipotezleri desteklemeyen kanıtlar — olumsuz sonuçlar, başarısız replikasyon çalışmaları ve diğer karşıt bulgular üzerine kurulu. Şirket, metriklerinin tasarım gereği yazar kimliğini, kurumu ve yayın yerini görmezden geldiğini, mevcut sistemin prestij yanlılığıyla tam da bu yüzden mücadele ettiğini söylüyor.
Haziran analizinde QED, 57.455 bioRxiv ön baskısından 574'ünü ilk %1 olarak seçti. Daha sonra hakemli dergilerde yayımlanan 2.879 ön baskı üzerinde yapılan bir doğrulama çalışması, QED'nin bunların %12,9'unu nihai dergilerinin ima ettiğinden daha yüksek puanladığını ortaya koydu — şirketin yayın sisteminin gözden kaçırdığını söylediği 'gizli mücevherler'. Kör bir panel testinde uzmanlar, belirleyici karşılaştırmaların %75'inde QED'nin tercih ettiği makaleyi daha üstün buldu.
Eleştirmenler, aracın yeni bir prestij rozeti yarattığından ve metrik odaklı akademiyi güçlendirdiğinden endişeleniyor; yapay zekânın bilimsel kaliteyi şeffaf biçimde yargılayıp yargılayamayacağını da sorguluyorlar. QED'nin aracı araştırmacılara ücretsiz; 70'ten fazla ülkede 1.500 kurumdaki 10.000'den fazla laboratuvar tarafından kullanıldı. Kâr amacı gütmeyen openRxiv, Kasım ayından bu yana sistemi bioRxiv üzerinde pilot olarak test ediyor. Şirket, sistemi yayıncılara satmayı planlamadığını söylüyor.
