Pytanie:
Kim są ludzie, którzy recenzują znacznie więcej artykułów, niż przesyłają do recenzji?
Rebecca J. Stones
2019-09-15 07:28:53 UTC
view on stackexchange narkive permalink

Przesłałem do recenzji więcej artykułów niż zrecenzowałem sam. Staram się sprawdzać tak często, jak mogę, ale jest to ograniczone przez przychodzące żądania. Wydawcy twierdzą, że jestem nieco powyżej mediany (0,3 recenzji: 1 publikacja), chociaż te dane są niekompletne.

My Publons review:publication ratio of 0.6:1 vs. the median of 0.3:1

Wygląda na to, że na świecie muszą być ludzie, którzy recenzują znacznie więcej artykułów niż przesyłają do recenzji. Ale kto?

Pytanie : Kim są ludzie, którzy recenzują znacznie więcej artykułów niż przesyłają do recenzji?

Po prostu mam jakiś obraz mentalny kto otrzymuje, akceptuje i realizuje dużą liczbę próśb o sprawdzenie. Nie wyobrażam sobie, że to profesorowie wysokiego szczebla, którzy wydają się być ciągle zajęci. Nie spodziewam się też, że to początkujący badacze, ponieważ są nierozstrzygnięci i mało prawdopodobne, aby o nich myśleli, gdy redaktorzy wysyłają e-maile do recenzentów.

W ciągu ostatnich kilku lat przejrzałem około dwa razy więcej artykułów niż przedłożyłem.Jestem profesorem nadzwyczajnym na uniwersytecie R3 w USA.Pamiętaj również, że oboje zajmujemy się matematyką, gdzie recenzja wymaga dużo pracy, a czasopisma zazwyczaj proszą o 1 lub 2 recenzentów na artykuł.W innych dziedzinach recenzje są znacznie szybsze, więc dla starszej osoby może nie być niepraktyczne, aby zrobić ich kilka.
W każdym razie jestem głęboko sceptyczny co do danych Publons.
Jeśli dodasz szybkie opinie, myślę, że po zakończeniu kadencji przejrzałem co najmniej trzy razy więcej artykułów, niż napisałem.
Możesz [sortować publikacje według liczby recenzji] (https://publons.com/researcher/?is_core_collection=1&order_by=num_verified_reviews).Opierając się na tym, odpowiedzią wydają się być ludzie tacy jak Swapnil Fegade z University of North Dakota Grand Forks, którzy, jeśli wierzymy, że dane zrobiły 1421 recenzji, 441 w ciągu ostatnich 12 miesięcy, ale nigdy niczego nie opublikowały.Ponownie jestem sceptyczny.
Przypuszczam, że organizator konferencji (lub bliski kontakt) mógłby osobiście przejrzeć wiele nadesłanych artykułów.Być może niektóre obszary badawcze dokonują przeglądu wszystkich nadesłanych prac, z których wiele normalnie byłoby odrzucanych w matematyce.
„Nie spodziewam się też, że to początkujący badacze” - przejrzałem wiele innych artykułów, gdy byłem młody.Z mojego doświadczenia wynika, że wiele recenzji pochodzi od „początkujących” lub świeżo upieczonych doktorantów, co czasami może być frustrujące.Obecnie akceptuję prośbę o recenzję tylko wtedy, gdy pochodzi od redaktora, którego znam, lub jeśli artykuł dotyczy problemu w jednym z moich projektów (bardzo rzadko).W przybliżeniu robiłem 3-5 artykułów miesięcznie;obecnie piszę 5-10 artykułów rocznie, najlepsze!
Prawdopodobnie recenzowałem 4 do 5 razy więcej prac (matematyka) niż przedłożyłem (od początku lat 90. do końca 2000), ale był to głównie czynnik bycia głównie na stanowiskach dydaktycznych, a później na stanowisku pozaakademickim,jak również podejmowanie się kilku dużych, niedokończonych projektów na wczesnym etapie mojej „kariery” (które wciąż są kontynuowane, ponieważ mam czas i zainteresowanie).Nie jestem pewien, kiedy ostatnio przeprowadziłem pełną kontrolę formalną, ale w ciągu ostatnich kilku lat złożyłem 3 lub 4 wnioski o wydanie orzeczenia wstępnego, z których jeden był prawdopodobnie wystarczająco obszerny, aby zasługiwać na pełną ocenę.
@NateEldredge Huh.Uważam, że pomysł, że ktoś robi recenzje, jeśli nigdy ich nie opublikował, jest dziwny na wielu poziomach.Po pierwsze, w jaki sposób redaktorzy decydują, że jest kimś, do kogo warto coś wysłać (lub nawet znać swoją dziedzinę)?Po drugie, dlaczego ktokolwiek miałby ufać recenzjom kogoś, kto nigdy nie zrobił czegoś wartego opublikowania?Wydaje się to naprawdę dziwne i skłania mnie do sceptycznego podejścia do tych liczb.
Myśl.W niektórych dyscyplinach inżynieryjnych, np. Inżynierii „mechanicznej” lub „inżynierii lądowej”, recenzentami mogą być również praktycy, którzy uczestniczą w konferencjach i komisjach.Recenzenci ci nie przesyłają / nie publikują często artykułów, ale proszeni są o przejrzenie artykułów ze względu na ich wiedzę fachową i doświadczenie w terenie.
@NateEldredge wiele osób (łącznie ze mną) nie przejmuje się importowaniem swoich publikacji do Publons.Tak więc 0 publikacji nie jest wskaźnikiem niczego.Chociaż jestem głęboko sceptyczny co do niektórych naprawdę wysokiej liczby recenzji, możliwe, że jest to również wskaźnik jakości.W przypadku kilku moich ostatnich recenzji, kiedy redaktor wysłał odpowiedź do autorów, zauważyłem, że przynajmniej jedna z pozostałych „recenzji” była pojedynczym akapitem prawie bez treści.
@JoshuaZ: mój przełożony był redaktorem czasopisma i chociaż nie wiem na pewno, myślę, że to prawdopodobnie on poprosił mnie o napisanie pierwszych recenzji.(W tym czasie miałem jeden przedłożony manuskrypt).
Średnia 0,3 ukrywa dystrybucję, która jest prawdopodobnie bardzo wypaczona, z kilkoma recenzentami, którzy recenzują znacznie więcej artykułów niż przesyłają, i wielu recenzentów, którzy recenzują bardzo niewiele artykułów.
To musi być zależne od pola.W mojej dziedzinie ja i wszyscy nieco starsze osoby znam znacznie więcej recenzji niż przedstawiają - co ma sens, ponieważ trzeba nadrobić zaległości dla osób, które * tylko * składają (tj. Początkujących naukowców, ludzi przemysłu, profesorów, którzy zawszepowiedz nie itp.)
Jedną z rzeczy związanych z wydawnictwem Publons jest to, że jeden artykuł może zawierać wiele recenzji.Powiedzmy, że dokonam przeglądu rundy 1 i głównych zmian.Zobaczę rundę 2, która jest zwykle krótką recenzją (np. Dziękuję za zaproponowanie zmian).Może to zawyżać liczbę recenzji, które ktoś wystawia.
@RichardErickson ah, to robi różnicę.W mojej odpowiedzi poniżej założyłem, że przy obliczaniu własnego wskaźnika chodzi o liczbę recenzowanych artykułów, a nie liczbę rund recenzowania.
@Brian Borchers, prawdopodobnie prawda, a ponadto można oczekiwać, że dane Publons będą bardzo niekompletne, więc nie są one dobrym wskaźnikiem dla zadanego pytania.Przeglądam znacznie więcej niż mam na moim profilu Publons, po prostu dlatego, że nie zawracam sobie głowy ręcznym wysyłaniem informacji do Publons w przypadku czasopism, które nie są partnerami Publons.Podejrzewam, że wiele osób postępuje podobnie.
Dziewięć odpowiedzi:
Peter Taylor
2019-09-15 13:29:19 UTC
view on stackexchange narkive permalink

Nie wyobrażam sobie profesorów wysokiego szczebla, którzy wydają się być ciągle zajęci.

Jeśli chcesz coś zrobić, poproś kogoś, kto jest ciągle zajęty.

Nie spodziewam się też, że to początkujący badacze, ponieważ są nierozstrzygnięci i mało prawdopodobne, aby o nich myśleli, gdy redaktorzy wysyłają e-maile do recenzentów.

Nie mogę wskazać konkretnych postów , ale widziałem wystarczająco dużo odniesień na tej stronie do scenariusza, że ​​uważam, że nie jest niczym niezwykłym, że redaktor prosi profesora wysokiego szczebla i profesora o oddelegowanie do początkującego naukowca na ich wydziale.

Trochę faktycznych danych: zdarzyło mi się to dwukrotnie, z różnymi profesorami.Innym razem poproszono mnie o współsędziowanie.
Zwróć uwagę, że prof zwykle odpowiada redaktorowi z prośbą o wysłanie recenzji bezpośrednio do postdoc.Oczywiście, delegowanie własnych recenzji przez profesora do doktorów pod nazwiskiem profesora byłoby wysoce nieetyczne i stanowczo sprzeczne z zasadami większości czasopism.
@WetlabStudent: nadal jest czymś nieznanym.
@tomasz Zdarzało mi się to regularnie podczas pracy w środowisku akademickim, prawdopodobnie prawie połowa recenzji, które zrobiłem (jeden profesor mówił mi, że zalecił mnie zapytać, jeden był redaktorem, który prawdopodobnie wysłał mi recenzje i mógł polecićmnie ponadto, nie mówiąc mi, delegowano własne recenzje, czasem prosząc tylko o częściowe recenzje z określonego aspektu artykułu).Z pewnością przejrzałem znacznie więcej artykułów, niż złożyłem jako pierwszy autor.
Nie jestem pewien, czy nie ma wielu profesorów, którym nie przeszkadza etyka.Kiedyś znalazłem pięć kopii tego samego artykułu na pięciu stronach internetowych profesorów.Bez przypisania, każdy sprawiający wrażenie, że był przez tego profesora.
@WetlabStudent: Oczywiście o to mi chodziło.Nie sądzę, żebym zgodził się inaczej.(Podczas współsędziowania redaktor został wcześniej zapytany, czy było to w porządku).
@WGroleau: Cóż, nie mogę sobie wyobrazić czegoś takiego w mojej okolicy (co z tym, że jest tak mały, że szybko by się wydostał i zrujnował czyjąś reputację).Najbliższą mi rzeczą są notatki na stronie internetowej profesora, przypisane (łącznie) innemu, który twierdzi, że nie miał do nich żadnego wkładu.
To ma sens - tak samo jest w przemyśle.Jak naprawdę można przejść od wczesnego do średniego etapu kariery bez tego rodzaju zadań?
JenB
2019-09-15 13:23:59 UTC
view on stackexchange narkive permalink

Po pierwsze, ten współczynnik jest oparty na opublikowanych artykułach, a nie przesłanych. Ale zasada jest taka sama. Kilka lat temu doradzono mi, że powinieneś przeglądać 3 lub 4 razy więcej artykułów, niż przesyłasz.

Pomyśl o tym w ten sposób; jeśli prace wymagają 3 recenzentów, a połowa prac nie zostanie opublikowana, wówczas próg rentowności wynosi 6 recenzentów na opublikowaną pracę. Jeśli jesteś w dziedzinie, w której typowych jest 3 autorów, wszyscy autorzy musieliby zrecenzować 2 artykuły na artykuł. Ale nie wszyscy autorzy są w stanie je recenzować w równorzędny sposób, więc 3-4 wydaje się działać dla mojej dyscypliny.

Redaktor byłby w stanie podać najlepsze informacje o tym, kogo proszą, ale starsze postdocs i najniższe wydaje mi się, że recenzentami w mojej dyscyplinie są naukowcy średniego szczebla. Z drugiej strony sprawdziłem publikacje i najwyższa liczba to tak naprawdę pół-emerytowany profesor.

Zgadzam się na to we wszystkim oprócz numeru: zazwyczaj uważam, że powtórzenie _dwukrotnie_ tyle, ile prześlę, jest wystarczające.Nie robię sobie luzu dla nikogo innego.To powiedziawszy, zwykle mam bardzo niskie kryteria akceptacji recenzji, dopóki nie trafię _dwukrotnie więcej niż znacznik zgłoszeń_, ale nadal akceptuję recenzje, po prostu bardziej wybiórczo pod względem dopasowania tematu i jakości czasopisma, więc prawdopodobnie ostatecznie sprawdzę 3-4 razy tyle, ile ostatecznie przesyłam (nawet gdy jestem „bardziej selektywny”, zdaję sobie sprawę, że rzadko mam serce, by odrzucić recenzję).
Moja praktyczna zasada jest taka: jeśli prześlę do czasopisma, które wymaga x raportów sędziów, powinienem recenzować co najmniej x razy dla tego czasopisma za każdy artykuł, który tam przesyłam.
Buzz
2019-09-16 07:13:42 UTC
view on stackexchange narkive permalink

Osoby, które przesyłają dobre recenzje, proszone są o ich więcej, a potem coraz więcej i więcej, i ...

Pozwólcie, że opowiem wam o mojej własnej historii sędziowania. Mój profil badawczy nie jest gwiezdny, ale jest wystarczający dla zatrudnionego fizyka teoretycznego w średniej instytucji R1; Zwykle publikuję około dwóch do pięciu artykułów rocznie. Z drugiej strony, oceniam coś około dziesięciu razy więcej artykułów, a praca sędziowska staje się głównym elementem mojej profesjonalnej służby. W ciągu ostatnich kilku lat zdobyłem nagrody sędziowskie w kilku dużych czasopismach.

Przez cztery lata jako post-doc, otrzymywałem jedną pracę na rok do recenzowania. Mniej więcej w czasie, gdy byłem na tyle ugruntowany, że mogłem dostać pracę na stałe, liczba ta wzrosła do około jednego papieru miesięcznie i od tego czasu stale rośnie (mniej więcej liniowo) przez ponad dekadę. W przeciwieństwie do niektórych moich kolegów, staram się oceniać praktycznie wszystko, co mi przysłano, i mam kwalifikacje do oceny, a ponieważ zbudowałem relacje z niektórymi redaktorami czasopism, otrzymałem więcej artykułów i przydzielono mi orzeczenie o bardziej skomplikowanych sytuacje, takie jak przypadki, w których poprzedni sędziowie nie wyrazili zgody lub odwołania złożone przez autorów odrzuconych prac.

Szczerze mówiąc, minęło trochę czasu, który prawdopodobnie przydałby mi się do badań. Z drugiej strony czuję, że w pewnym sensie zawdzięczam społeczności zawodowej swoją wiedzę; Chcę mieć przynajmniej swój sprawiedliwy udział. Pracuję w niszowej dziedzinie i nie ma wielu ludzi, którzy są w stanie udzielić pełnej oceny badań w tej dziedzinie. Oznacza to zarówno upewnienie się, że artykuły zawierające podstawowe błędy nie są omyłkowo opublikowane, jak i upewnienie się, że dobre artykuły są odpowiednio sprawdzone i poprawione, aby zmaksymalizować ich użyteczność. Szybkie rozpoznanie niedopuszczalnie złych prac to umiejętność, ale po zidentyfikowaniu poważnych problemów z rękopisem napisanie rekomendacji odrzucenia nie jest zbyt czasochłonne. Z drugiej strony, sprawdzanie dobrych artykułów pod kątem drobnych wyborów i błędów może zająć sporo czasu i tam prawdopodobnie istnieje prawdziwy kompromis między oceną pracy a wynikami badań. Jednak, jak powiedziałem, jestem zadowolony z tego, gdzie obecnie się znajduję w tym zakresie.

Dziękuję za sumienną pracę i wkład w społeczność!
Allure
2019-09-15 12:11:30 UTC
view on stackexchange narkive permalink

Autorzy z krajów rozwiniętych zwykle recenzują znacznie więcej artykułów niż przesyłają, podczas gdy trzy największe kraje, w których sytuacja jest odwrotna, to Chiny, Indie i Iran.

Źródło

user20637
2019-09-15 23:32:06 UTC
view on stackexchange narkive permalink

Przed przejściem na emeryturę pracowałem w firmie, która (między innymi) prowadziła płatne badania dla firm przemysłowych. Mieliśmy niewielką motywację do publikowania w recenzowanej literaturze. Pojawiła się zachęta do publikowania w literaturze branżowej, ale niewiele - byliśmy bardzo dobrze znani wśród potencjalnych klientów. Uczestniczyliśmy w grupach branżowych i regulacyjnych, wnosząc wkład w „większe dobro” przemysłu. Ja i wielu moich starszych kolegów przejrzeliśmy o wiele więcej artykułów niż przedłożyliśmy; Nie mogę mówić w imieniu moich kolegów, ale ponownie uznałem to za przyczynianie się do „większego dobra”.
Zredagowano, aby dodać:
Podobnie nie interesowało mnie w ogóle rejestrowanie moich wkładów w Publons, o których pisze Wikipedia jako (moje podkreślenie) „... usługa dla pracowników akademickich w celu śledzenia, weryfikacji i prezentowania ich wzajemnych recenzji i wkładu redakcyjnego ...”.

Especially Lime
2019-09-16 12:21:19 UTC
view on stackexchange narkive permalink

Podejrzewam, że głównym czynnikiem jest to, że wskaźniki będą się znacznie różnić w zależności od dziedziny. W mojej dziedzinie (czysta matematyka) typowa praca ma 1-3 autorów i otrzyma recenzje od dwóch osób (więcej, jeśli zostanie odrzucona po recenzji i wysłana do innego czasopisma, chociaż nakładanie się recenzentów w tym przypadku nie jest rzadkością). Spodziewałbym się więc, że mediana tam będzie gdzieś około 1. Mój to 1,3 FWIW (nie jestem w publikacjach, ale prowadzę zapisy dla własnego interesu).

W innych dziedzinach typowa liczba autorów przypadająca na artykuł mógłby być znacznie wyższy bez znaczącego zwiększenia liczby recenzentów na artykuł, więc spodziewałbym się znacznie mniejszego wskaźnika. 0.3 wydaje się rozsądne dla dziedzin, w których normą jest 10+ prac autorskich.

+1 za wskazanie, że średnia liczba recenzji na osobę będzie mniejsza niż średnia liczba artykułów na osobę, jeśli średnia liczba autorów / artykułu jest większa niż średnia liczba recenzentów / artykułu.
(Myślę też, że stosunek około 1 jest dobry dla czystej matematyki).
Komentarz do pytania sugeruje, że wydawnictwo traktuje recenzję jednego artykułu w dwóch turach jako dwie recenzje, a nie jedną.W takim przypadku mój wskaźnik byłby znacznie wyższy (około 2).
Alchimista
2019-09-16 14:08:15 UTC
view on stackexchange narkive permalink

Właściwie najbardziej recenzująca jest w mojej dziedzinie i pokrewnych , zrobiona dokładnie według dwóch kategorii, które chciałeś zwolnić.

Renomowany profesor otrzymuje dużą liczbę zaproszeń , tak że pomimo odmów stosunek ten jest wysoki.

Młody i odnoszący sukcesy badacz otrzymuje stosunkowo niewiele, ale zwykle akceptuje wszystko, ponieważ jest to nowe i niewątpliwie kształcące doświadczenie.

Podejrzewam, jak wskazuje inna odpowiedź, że jest to bardzo związane z polami i podpolami. Osobiście recenzuję znacznie więcej artykułów niż te, które opublikowałem.

Podczas gdy badacz chemii syntetycznej publikuje i może zostać zaproszony przez kilka dobrych czasopism, jeden z materiałoznawstwa może to zrobić w szerszym zakresie, od fizyki i chemii po dedykowane publikacje. Podczas przygotowywania nowych materiałów zasadniczo wszystkie artykuły stają się interesujące, a recenzowanie staje się sposobem na utrzymanie aktualności.

Podobny scenariusz jest możliwy do przyjęcia w wielu naukach stosowanych.

W mojej dziedzinie liczba recenzji w dużej mierze przewyższa liczbę przesłanych / opublikowanych prac dosłownie każdego absolwenta, jakiego kiedykolwiek spotkałem.

Również stosunek ponieważ te podane w twoim Q, jeśli nie są obliczane indywidualnie, blokowałyby publikacje badawcze. Prosta matematyka sugeruje, że stosunek niższy niż jeden stanowiłby duży problem w obecnej procedurze, z wyjątkiem być może dziedzin, w których powszechne jest posiadanie około dziesięciu lub więcej autorów (wciąż niektóre z tych dziedzin mają również bogatszą literaturę, np. Medycyna). nazwisko na liście autorów nie czyni cię poleconym, a przynajmniej nie jednym z pierwszych, a nawet drugich wyborów dobrego czasopisma.

Edytuj 1 po komentarzu.

Edycja 2: Pobudzony tym W końcu zarejestrowałem się w Publon. Podczas gdy importowanie większości moich artykułów było prostym kliknięciem, tysiące recenzji, które zrobiłem w przeszłości, nigdy się nie pojawi. Tak więc na obecnym etapie przekazałem X artykułów do literatury bez żadnej oceny. Przeoczyłem fakt, że inspiracją dla OP był Publon. Zasadniczo może być pewna, ile przegląda (moim zdaniem za mało, jeśli chodzi o to, co ja i inni napisaliśmy powyżej), ale generalnie należy być bardzo sceptycznym wobec tych danych, niezależnie od ich rzeczywistego znaczenia.

„Również stosunek taki, jaki podano w twoim Q, blokowałby publikacje badawcze. To prosta matematyka”.Zależałoby to od tego, jak wygląda krzywa - nawet jeśli większość recenzentów ma 0,3 recenzowanych artykułów / przesłanych artykułów, mniejszy odsetek recenzentów ze znacznie wyższym współczynnikiem byłby w stanie przeżyć ogólną właściwość do 1: 1.
@nick012000 Byłem świadomy takiego komentarza, że można grać liczbami.Przede wszystkim niewielki odsetek wytrawnych recenzentów i tak podnosi średnią.Zakładając równomiernie rozłożone obciążenie, współczynnik powinien wynosić co najmniej powyżej 1. W niektórych dziedzinach jest ponad 10 autorów, ale w wielu 1 jest powszechny.Sędziowie mają zwykle co najmniej dwie osoby.Wiele czasopism twierdzi, że wskaźniki odrzucenia są bardzo wysokie.Chciałem przekazać wiadomość, a nie coś demonstrować.Będę edytować.Dzięki.
Ponieważ jest to mediana, którą zacytowali, a nie średnia, cytowana liczba byłaby mniej podatna na zniekształcenie przez niewielką liczbę bardzo dużych wartości.
Barker
2019-09-17 03:26:03 UTC
view on stackexchange narkive permalink

Jestem jednym z Twoich tajemniczych recenzentów. Pracuję w branży badawczej i zyskałem pozytywną opinię w swojej dziedzinie. W związku z tym często jestem proszony o recenzowanie artykułów w czasopismach, a ponieważ moja kombinacja dziedzin jest stosunkowo rzadka, generalnie czuję się zobowiązany do zapewnienia jakości wkładu w tej dziedzinie poprzez recenzowanie artykułów (co często robię w wolnym czasie).

Z drugiej strony przesyłanie artykułów jest bardziej drugorzędną (lub nawet trzeciorzędną) funkcją mojej pracy. Wszelkie publikacje muszą zostać zatwierdzone przez nasz zespół ds. Własności intelektualnej, aby ustalić, czy musimy najpierw uzyskać patent, czy nawet spróbować chronić wiedzę jako tajemnicę handlową. Kiedy publikuję, zwykle ma to na celu ustalenie wartości produktu lub jest to część współpracy akademickiej, w którą byłem zaangażowany. W związku z tym publikuję tylko raz w roku lub co dwa lata.

Anonymous Physicist
2019-09-15 13:49:59 UTC
view on stackexchange narkive permalink

To tylko teoria: najbardziej aktywnymi recenzentami są redaktorzy nisko ocenianych czasopism, którzy sami przypisują recenzje.



To pytanie i odpowiedź zostało automatycznie przetłumaczone z języka angielskiego.Oryginalna treść jest dostępna na stackexchange, za co dziękujemy za licencję cc by-sa 4.0, w ramach której jest rozpowszechniana.
Loading...