Hakem değerlendirmesinin şifresi çözüldü

Makaleleri kimin değerlendirdiği, kararların ne anlama geldiği ve reddin neden tamamen normal olduğu.

Hakem değerlendirmesinin şifresi çözüldü

Hakem değerlendirmesi (peer review), bir taslağı yayına dönüştüren kalite kontrol adımıdır: bir yayın yeri makalenizi kabul etmeden önce birkaç bağımsız uzman onu okur ve iddiaların ayakta durup durmadığına karar verir. Yavaştır, kusurludur, zaman zaman çıldırtıcıdır ve yine de bilimsel kaydı dürüst tutmak için bulunmuş en iyi sistemdir.

Rol dağılımı

RolNe yaparlar
Hakem (reviewer, referee)Makalenizi dikkatle okur, bir eleştiri yazar, bir karar önerir
Program komitesi (PC)Bir konferansın hakem havuzu; “PC üyesi” hakem demektir
Alan başkanı (AC) / meta-hakemBir avuç makaleyi gözetir, hakem değerlendirmelerini tartar, bir öneri sunar
EditörDergideki karşılığı: hakemleri seçer ve son kararı verir

Her makaleyi genellikle 2 ila 4 hakem okur. Bunlar ücretsiz çalışan gönüllülerdir; çoğunlukla sizin alt alanınızdaki araştırmacılardır ve akşamları ve hafta sonları değerlendirme yaparlar. Bu, değerlendirme kalitesindeki dalgalanmanın çoğunu açıklar.

Kör değerlendirme ve ne kadar kör

  • Tek kör: hakemler kim olduğunuzu bilir; siz onların kim olduğunu bilmezsiniz.
  • Çift kör: iki taraf da diğerini bilmez. Yazar adları çıkarılmış, anonimleştirilmiş bir makale gönderirsiniz.

Çift kör, çoğu bilgisayar bilimi konferansında standarttır ve ünlü isimlere ve kurumlara yönelik önyargıyı azaltmayı amaçlar. Göndermeden önce yayın yerinizin kurallarını kontrol edin; PDF’te yanlışlıkla kalmış bir ad masa başı retle sonuçlanabilir.

Kararlar

Dergiler genellikle dört sonuçtan biriyle yanıt verir:

KararAnlamı
Kabulİlk denemede nadirdir. Yüksek sesle kutlayın.
Küçük revizyonKüçük şeyleri düzeltin; neredeyse içerdesiniz
Büyük revizyonGerçek iş gerekiyor, ama kapı açık
RetHayır, ama genellikle işinize yarayacak gerekçelerle

Konferanslar bunu çoğunlukla kabul ya da ret olarak sıkıştırır, bazen “koşullu kabul” ile birlikte. Değerlendirmeler çoğu zaman puanlarla gelir; 1 ile 10 arası bir derece ve bir güven derecesi gibi. Puanlar tartışmaya çıpa olur ama karar vermez; makalenizi savunan bir hakem, ondalıklı bir ortalamadan daha önemlidir.

Tek paragrafta yazar yanıtı

Birçok konferans, nihai karardan önce yazarlara değerlendirmelere yanıt vermek için kısa bir süre tanır; buna rebuttal ya da yazar yanıtı denir. Yanlış anlamaları düzeltmek, doğrudan soruları yanıtlamak ve makalede zaten bulunan kanıtlara işaret etmek için birkaç yüz kelimeniz olur. Sınırdaki bir kararı tersine çevirebilir ve iyisini yazmak bir beceridir; bu konu yazar yanıtları ve revizyonlar dersinde ele alınıyor.

Ret varsayılandır, felaket değil

Üst düzey yayın yerleri gönderimlerin kabaca yüzde 15 ila 25’ini kabul eder. Bunu tersinden düşünün: iyi bir yayın yerinde iyi bir makale için tipik sonuç reddir. Adını duyduğunuz hemen her ünlü makale önce bir yerde reddedilmiştir. Pratik hamle, değerlendirmeleri soğukkanlılıkla, bir gün sonra okumak, düzeltilebilecek her zayıflığı çıkarmak ve daha güçlü hâliyle yeniden göndermektir.

Bu, nasıl yazdığınız için ne anlama gelir

Hakemler, hızlı okuyan yorgun gönüllülerdir. Açık yapı, dürüst iddialar ve temiz dizgi iyi niyet kazandırır. Standart bölümleri bilmek de yardımcı olur, bkz. makale anatomisi turu; ilk belgeniz gibi düzenli bir LaTeX kurulumu da biçimlendirmenin bir hakemin kaş çatmasının nedeni olmasını önler. Taslaktan karara ve oradan camera-ready sürüme kadar tüm yol ilk makale yol haritasında gösteriliyor.

Araştırma, kodu çözüldü bölümüne geri dön