ICLR i ARR ograniczają liczbę artykułów na autora — Science News

Międzynarodowa Konferencja nt. Reprezentacji Uczenia (ICLR) oraz system ACL Rolling Review (ARR) ograniczyły liczbę artykułów naukowych, które jeden badacz może zgłosić do recenzji. Decyzję podjęto w związku z gwałtownym wzrostem liczby prac i niedoborem recenzentów, informuje Science News.

ICLR, jedna z największych konferencji w dziedzinie sztucznej inteligencji, 10 lat temu otrzymywała około 500 zgłoszeń. Po upływie terminu zgłoszeń na konferencję w 2027 roku ich liczba przekroczyła 40 tysięcy. Organizatorzy wiążą ten skok z rosnącym zainteresowaniem AI, presją na publikowanie oraz możliwością szybszego przygotowywania tekstów z pomocą sztucznej inteligencji.

Limity dla autorów i recenzentów

ICLR i ARR ustanowiły dla większości autorów limit 20 artykułów na jeden okres zgłoszeń. Zasada ICLR zacznie obowiązywać podczas konferencji w 2027 roku. Badacz będzie też mógł być autorem tylko jednej pracy, której współautorzy nie obejmują wykwalifikowanego recenzenta.

ARR, które prowadzi recenzowanie dla dorocznej konferencji Association for Computational Linguistics i powiązanych z nią wydarzeń, wprowadza nowe zasady w tym miesiącu. Ograniczają one do pięciu liczbę zgłoszeń, w których dana osoba może być pierwszym autorem. Jeśli żaden z autorów nie spełnia kryteriów recenzenta, mogą zaangażować wykwalifikowanego kolegę, lecz jedna osoba będzie mogła pełnić taką rolę przy nie więcej niż dwóch artykułach.

Więcej aktualnych wiadomości na kanale UA.News w Telegramie Telegram.

Niedobór recenzentów

W tym roku 20% z 19 500 zgłoszeń do ICLR nie miało autora, który mógłby prowadzić wzajemne recenzowanie. Wielu z tych badaczy było na początku kariery i nie miało dorobku publikacyjnego. W maju około 38% z 17 tysięcy prac przesłanych do ARR również nie miało wśród autorów wykwalifikowanego recenzenta.

ARR uznaje za wykwalifikowanego recenzenta osobę, która wcześniej opublikowała dwie prace na konferencjach AI z określonej listy. ARR musiało prosić takich uczestników o podjęcie większej liczby recenzji, niż byłoby rozsądne. Prace, których żaden autor nie spełnia ustalonych kryteriów, system kieruje do loterii, z której tylko część zostanie wybrana do oceny eksperckiej.

Ograniczenia mają zachęcić autorów do zgłaszania mocniejszych prac, mogą jednak utrudnić udział młodym naukowcom z dużych grup badawczych, którzy są współautorami wielu artykułów. Organizatorzy ICLR przyznają także, że istnieje ryzyko formalnego współautorstwa wykwalifikowanych recenzentów, którzy nie uczestniczyli w badaniu, i oświadczyli, że będą to monitorować.

Podobne kroki podejmują też inne platformy. NeurIPS w ubiegłym roku zaczęła wymagać od autorów ukończenia przydzielonych im recenzji, zanim będą mogli zobaczyć opinie o własnych pracach. Serwer preprintów arXiv w ubiegłym tygodniu ogłosił limit dwóch artykułów na autora miesięcznie: we wrześniu otrzymał 40 363 rękopisy wobec 20 569 we wrześniu 2024 roku.

Czytaj nas na Telegram i Sends