Artykuł
|
Tom 2, Wydanie 1
Artykuł
|
Tom 2, Wydanie 1

Ocena czasopisma naukowego

Raffaella Inglese;Siria Grasso
DOI: https://doi.org/10.36158/97888929555168
Najczęściej czytane
W tym zeszycie

Abstrakt

Jedną z głównych działalności akademickich jest publikacja artykułów naukowych związanych z ich tematami badawczymi. Ponadto posiadanie dobrej jakości oceny badań ma ogromne znaczenie dla dostępu do kariery akademickiej, jak również dla możliwości uzyskania finansowania ze strony państwa. W związku z tym, aby ocenić czasopismo w tym przypadku, musi być w otwartym dostępie i czasopiśmie, oprócz wszystkich istotnych składników, takich jak numer ISSN, słowa kluczowe, abstrakt angielski i znaczący komitet naukowy. Niniejsza praca ma na celu przeanalizowanie wszystkich tych komponentów strukturalnych i treści czasopisma naukowego, poprzez zbadanie szczególnie humanistycznych i naukowych publikacji – koncentrujących się na istotnych aspektach obiektywnej oceny, również z multidyscyplinarnego punktu widzenia – oraz interesującej książki Martinsa Zaumanisa opublikowanej w 2021 r., „Write an impactful research paper: A scientific writing technique that will shape your academic career”

Jedną z głównych działalności badacza jest publikacja artykułów związanych z ich tematami badawczymi.

Ocena jakości badań jest niezbędna, aby uzyskać dostęp do finansowania, które może pochodzić na przykład z udziału w projektach europejskich. Kiedy uzyskuje się finansowanie publiczne, konieczne jest, aby wyniki badań były następnie dostępne dla wszystkich bezpłatnie i natychmiast. Dobra ocena jakości badań jest również niezbędna do podjęcia kariery akademickiej.

Dlatego przy ocenie czasopisma dzisiaj bardzo ważne jest, aby czasopismo to było w otwartym dostępie, innymi podstawowymi cechami są regularna cykliczność, kod ISSN, tłumaczenie co najmniej streszczenia na język angielski, obecność słów kluczowych i obecność odpowiedniego komitetu naukowego, być może międzynarodowego. Czasopisma podzielone są głównie na dwie duże grupy: naukowe i humanistyczne. Te pierwsze charakteryzuje Impact Factor, czyli wskaźnik wynikający z relacji pomiędzy cytatami artykułów opublikowanych w poprzednim dwuletnim okresie a łączną liczbą artykułów opublikowanych w tym samym dwuletnim okresie przez czasopismo. Cytaty artykułów płyną do Journal Citation Report, Scopus i Web of Science:

  • Science Citation Index Expanded obejmuje ponad 8500 godnych uwagi czasopism obejmujących 150 dyscyplin. Pokrycie idzie od roku 1900 do dnia dzisiejszego.
  • Indeks Cytowania Nauk Społecznych obejmuje ponad 3000 czasopism w dyscyplinach nauk społecznych. Zakres pokrycia sięga od roku 1900 do dnia dzisiejszego.
  • Od 1975 r. indeks cytowań sztuki i humanistyki obejmuje ponad 1700 czasopism poświęconych sztuce i naukom humanistycznym. Ponadto uwzględniono również 250 wiodących czasopism naukowych i społecznych.
  • Emerging Sources Citation Index obejmuje ponad 5000 czasopism naukowych, społecznych i humanistycznych.
  • Indeks cytowań książek obejmuje ponad 60 000 książek wybranych w sposób redakcyjny od 2005 r.
  • Indeks CPCI (Conference Proceedings Citation Index) obejmuje ponad 160 000 tytułów konferencji naukowych od 1990 roku do chwili obecnej.

Na przykład obliczenie IF 2018 dla danego czasopisma:

75 2018
Cytaty artykułów opublikowanych w latach 2016-17 75 = 0,484
155 Ogółem artykuły opublikowane w latach 2016-17

Czasopisma typu humanistycznego są zamiast tego podzielone na klasy: w klasie A znajdujemy najbardziej prestiżowe czasopisma dla każdej dyscypliny, czasopisma, które przeszły proces wzajemnej oceny, które wychodzą regularnie, już od kilku lat, z abstraktami w języku angielskim itp.; aby uzyskać Klasę A, należy złożyć bardzo udokumentowaną prośbę.

Ciekawy artykuł Faggiolaniego i Solimine 'a na temat ewaluacji ukazał się dziesięć lat temu na AIB Studi1. Jeśli poszukamy go na stronie Aiba Studi, możemy zobaczyć różne rzeczy: po prawej stronie, gdzie ten magazyn jest indeksowany (ANVUR, DOAJ, SCOPUS), w centrum doi, streszczenie, wszystkie ważne dane, wykres z pobraniami zaktualizowanymi do zeszłego miesiąca, referencje i wreszcie, jak artykuł powinien być cytowany.

Artykuł podkreśla, że dla publikacji w naukach humanistycznych monografia ma często większe znaczenie niż pojedynczy artykuł, a publikacja w języku innym niż angielski jest karana. Często publikacje w naukach humanistycznych nie są w wielu rękach, a to znacznie zmniejsza liczbę cytowań. Co więcej, w przypadku czasopism humanistycznych wartość naukowa na ogół rozciąga się na znacznie dłuższy czas, nawet na wiele lat. Znaczenie wzajemnej oceny jest zatem podtrzymane, chociaż istnieją również problemy w tej praktyce. Być może najlepszym rozwiązaniem byłoby podejście mieszane, które uwzględnia pewne „mierzalne” czynniki, ale także podwójnie zaślepioną wzajemną ocenę (nieznani autorzy i oceniający). Artykuł wyobraża sobie, że biblioteki mogą dać pewien impuls do zrozumienia rzeczywistego wpływu publikacji na resztę świata naukowego, oceniając istnienie szczątków i obecność w katalogach prestiżowych bibliotek metodami takimi jak LCA (Library Catalog Analysis). Inni autorzy, tacy jak Figà Talamanca, wystartowali dwadzieścia lat temu przeciwko używaniu IF w matematyce, ponieważ uwzględniano również cytaty „przyjaciół” lub „negatywne” cytaty. Ostatecznie nie jest pewne, czy duża ilość oznacza koniecznie również jakość2.


Ryc. 1. C. Faggiolani e G. Solimine, 2012, La valutazione della ricerca, la bibliometria e l’albero di Bertoldo, AIB studi, 52, 1 (mag. 2012). DOI: https://doi.org/10.2426/aibstu- di-6290.

Według Antonelli De Robbio: „W celu pomiaru wpływu pracy autora w środowisku naukowym, konieczne jest rozpoczęcie eksperymentów z nowymi technikami bibliometrycznymi w otwartych archiwach wraz z opracowaniem nowych„ otwartych ”modalności mających na celu zaspokojenie wyrafinowanych potrzeb w zakresie prawidłowej oceny produkcji badań intelektualnych. […] Otwarty dostęp otwiera nowe granice, nie tylko przy opracowywaniu wskaźników bibliometrycznych nowej generacji koncentrujących się na pojedynczym dziele, a w każdym razie na autorze, a nie na czasopiśmie, ale przede wszystkim pod względem infrastruktury przydatnej do szeroko zakrojonej oceny skutków”3. De Robbio przytacza również badanie Daniela Torres-Salinasa z 2009 roku na temat LCA dla monografii, które jest najpopularniejszym produktem dla nauk humanistycznych4.

W 2014 roku Simona Turbanti5 w Navigating the sea by Scop- us Web Of Science and Google Scholar opisuje badania – przeprowadzone w dwóch dużych bazach cytowań, Web of science and Scopus, oraz w Google Scholar – prac naukowych profesorów i badaczy sektora M-STO/ 08, archiwów i bibliotekarstwa, ilustrujące zastosowaną metodę, główne różnice w wykorzystaniu oraz ograniczenia kwerendowanych baz danych. WoS wyszukuje w ponad 12 300 czasopismach, około 150 000 prac konferencyjnych i 30 000 publikacji monograficznych, z wyraźną przewagą tytułów z obszaru Ameryki Północnej, podczas gdy „młodszy” Scopus obejmuje około 19 500 tytułów okresowych, z których wiele pochodzi z Europy, ponad 350 zbiorów monografii (a od 2013 roku także pojedynczych monografii), prawie 5 000 000 artykułów konferencyjnych i patentów.

Poprzez zapoznanie się z Journal Citation Report, rocznym raportem przygotowanym przez ISI (Instytut Informacji Naukowej), gdzie można znaleźć statystyki dotyczące liczby cytowań, które są dokonywane w ramach dużej liczby czasopism naukowo-technicznych, możemy znaleźć, oprócz Impact Factor, inne wskaźniki, które pozwalają zrozumieć wartość czasopisma:

  • Indeks natychmiastowości: mierzy, jak szybko artykuł z czasopisma jest cytowany średnio i jak często artykuły z tego czasopisma są cytowane w bieżącym
  • Cytowany okres półtrwania: mierzy średni czas trwania cytowania artykułów w czasopiśmie w bieżącym roku, a raczej aktualność publikacji.
  • Rate of Cites Index: wskaźnik jakości pojedynczego artykułu, im bardziej cytowana jest praca, tym bardziej znacząca jest jej wartość naukowa.

Wpływ cytowania: wynika ze stosunku liczby cytowań do liczby opublikowanych prac. Odnosi się on bezpośrednio do przydatności, jaką publikacje narodu, uniwersytetu, struktury badawczej, a nawet pojedynczego badacza miały w świecie nauki.

Na przykład, szukając czasopisma naukowego w czasopiśmie JCR Coastal Engineering Journal, znajdujemy opis czasopisma, miejsca publikacji, okresowości, IF, z tym krótkim opisem w języku angielskim IFJ: „jest to miernik na poziomie czasopisma obliczony na podstawie danych indeksowanych w Web of Science Core Collection. Należy go stosować ze szczególną uwagą na wiele czynników, które wpływają na wskaźniki cytowań, takich jak objętość publikacji i charakterystyka cytowań danego obszaru i rodzaju czasopisma. Współczynnik wpływu czasopisma może uzupełniać opinię ekspertów i wzajemną ocenę opartą na wiedzy. W przypadku oceny akademickiej kadencji niewłaściwe jest stosowanie miernika na poziomie czasopisma jako miary zastępczej dla poszczególnych badaczy, instytucji lub artykułów”.

Oprócz danych liczbowych, na przykład, IF z 2020 r. wynosi 3216 (bardzo wysoki), a eliminując autocytowania, wynosi 2811, czyli nadal bardzo wysoki. Interesujący jest również trend IF w graficznym przedstawieniu.

Klasyfikacja czasopism humanistycznych jest działaniem prowadzonym przez ANVUR (Krajową Agencję Oceny Uczelni i Systemu Badawczego) na potrzeby obliczania wskaźników Krajowych Kwalifikacji Naukowych począwszy od 2012 roku. Jest on również potrzebny do celów akredytacji studiów doktoranckich, w odniesieniu do wymogu A4.3, począwszy od cyklu XXXIII (lata 2017-18), prowadzonych wyłącznie dla sektorów przewidzianych przez odpowiednie prawodawstwo, tj. tych, które są częścią nauk humanistycznych i społecznych i są określane jako „niebibliometryczne”. Klasyfikacja jest podzielona na 6 obszarów:

  • Architektura (Area CUN / VQR 8.a).
  • Nauki starożytne, filologiczno-literackie i historyczno-artystyczne (Obszar 10).
  • Nauki historyczne, filozoficzne i pedagogiczne (Obszar 11.a).
  • Nauk Prawnych (Obszar 12).
  • Nauki ekonomiczne i statystyczne (Obszar 13).
  • Nauki polityczne i społeczne (Obszar 14)6.

Zgodnie z rozporządzeniem ANVUR, aby zostać wpisanym na listę publikacji naukowych klasy A, czasopismo musi zapewnić procedury arbitrażu w trybie podwójnie ślepej próby (double-blind review). Wręcz przeciwnie, ocena produktów badawczych za pośrednictwem VQR jest jedynie „jednostronną ślepą oceną”, ponieważ oceniający jest świadomy tożsamości autora. Ten brak anonimowości może prowadzić do oceny autora, a nie dzieła.

Dlatego przed podjęciem decyzji, gdzie opublikować, sprytny badacz wybiera czasopismo, które ma dobry Impact Factor lub znajduje się w klasie A.

Co dzieje się w przypadku czasopism multidyscyplinarnych, jak w przypadku naszego UniCamillus Global Heath Journal? To znaczy, że nie można ich umieścić w tych dwóch kategoriach?

Na stronie internetowej ANVUR w dniu 15.02.2016 r., a więc już 6 lat temu, określono, co następuje: „Wyjaśnienie dotyczące traktowania czasopism wielodyscyplinarnych (takich jak Nature, Science itp.) w ewaluacji bibliometrycznej. Artykuły publikowane w tych czasopismach będą oczywiście przyjmowane do oceny i mogą być oceniane metodą bibliometryczną. Jak już wskazano w dokumencie towarzyszącym publikacji danych Web of Science oraz w notatce wyjaśniającej zastosowanie algorytmu bibliometrycznego, w rzeczywistości produkty publikowane w tych czasopismach, podczas oceny bibliometrycznej, będą oceniane przy użyciu progów SC a, do których należy większość artykułów cytowanych przez produkt w bibliografii oraz tych, które cytowały sam produkt”.

W związku z tym większość artykułów opublikowanych w czasopiśmie będzie rozpatrywana do celów ewaluacyjnych.

Ciekawy tomik został niedawno opublikowany w USA: Zaumanis M. (2021), Write an impactful research paper: A scientific writing technique that will shape your academic career, ISBN 13 9798680546949.

Autor jest młodym doktorantem w USA, obecnie naukowcem w Szwajcarii w Empa (grupie badawczej, która jest częścią ETH).

Książka ma na celu pokazanie strategii i narzędzi w celu ukierunkowania aspirujących naukowców i autorów na dobre pisanie udanych artykułów naukowych. Jest skierowany do czytelników specjalizujących się w jakiejkolwiek dziedzinie naukowej i humanistycznej. Celem jest dotarcie przede wszystkim do młodych badaczy, nawet (ale może przede wszystkim) bez publikacji. Próba pobudzenia tego typu widowni maskuje subtelną krytykę multidyscyplinarnego świata akademickiego, czasami tak elitarnego i przerażającego, że wydaje się nieosiągalna. Praca składa się z dwóch części.

Część 1: Podejście Leap Writing

Podejście EAP do pisania akademickiego jest schematycznym i systematycznym podejściem do pracy oraz wskazówką do wyboru odpowiedniego czasopisma, w którym będzie ona publikowana. Z językowego punktu widzenia nawiązuje się zarówno do formy, jak i języka nośnego badań. Znaczenie i skuteczność artykułu naukowego znajdują się w przekazie, który chcesz przekazać czytelnikowi, a nie w wyborze wysoko brzmiących i zbędnych terminów, które mogłyby tylko mylić. Jeśli chodzi o wybór języka angielskiego jako języka samochodowego, niewątpliwie najrozsądniejszym wyborem jest dotarcie do szerszego grona odbiorców, niemniej jednak nie jest konieczne posiadanie wysokiego poziomu kompetencji i znajomości tego języka. Jeśli chodzi o treść, każda praca akademicka zasługuje na uwagę, a także ideę za nią stojącą i uzyskane wyniki.

Zasada SKOKU

L: Układ graficzny, wykresy i tabele stanowią podstawowe wsparcie dla prezentacji artykułu naukowego. Obrazy (proste, a czasem nawet samoopisujące się) stanowią świetne źródło informacji zarówno dla czytelnika, jak i dla autora. Czytanie staje się szybsze i bardziej wyjaśniające, a także mniej wymagające. Zaumanis udostępnia link do strony (https://peerrecognized.com) specjalnie do stworzenia artykułu, zawiera wszystkie niezbędne narzędzia w tym zakresie.

E: Wyjaśnij wyniki. Pisząc artykuł należy zawsze pamiętać o przekazie, który chcemy przekazać; musi on być bezpośredni i „łatwy” do zrozumienia, pomimo złożoności przeprowadzonych badań. Przechodzimy zatem do wyjaśnienia celów, wyników i stosowanych metod (wszystko to będzie każdorazowo dopracowywane również z językowego punktu widzenia). Celem będzie doprowadzenie każdego czytelnika do tego samego wniosku. Nie należy lekceważyć znaczenia źródeł i bibliografii, z których korzystano w pracy, ważne jest, aby użytkownicy mogli zweryfikować prawdziwość badań, aby uznać je za wiarygodne (a następnie przytoczyć je i wykorzystać w innych dziedzinach studiów). Każdy początkowo wyznaczony cel musi znaleźć własną odpowiedź w konkluzji. Konsekwencja jest ważna

O: Reklama. Badania wymagają solidnej i spójnej struktury dla publikacji wysokiej jakości. Oznacza to, że porządek strukturalny artykułu będzie adekwatny do jego wpływu na czytelników. Abstrakt i tytuł będą niezbędne, aby przyciągnąć uwagę czytelnika i zachęcić go do przeczytania gazety. Oznacza to, że łatwy do zrozumienia abstrakt będzie bardziej stymulujący dla użytkowników.

P: Przygotuj się do złożenia. Jakość pracy z pewnością będzie istotna dla publikacji. Jeszcze ważniejszy jest jednak dobór odpowiedniej gazety lub czasopisma, w którym będzie ona publikowana. Istnieją w tym względzie pewne ważne kryteria wyboru; cele i historia czasopisma/gazety; wymagane treści; dostęp do opinii publicznej; okresowość; ranking i wiarygodność.

Część 2: Poznaj zasady gry

Osiem zasad, których należy przestrzegać przy publikacji w celu osiągnięcia sukcesu i wysokiego poziomu rezonansu akademickiego.

Publikuj dużo na początku swojej kariery: ważne jest, aby tworzyć określoną częstotliwość w odniesieniu do publikacji. Jeśli nie popełnisz błędów (czasem śmiertelnych), wynik będzie optymalny, a sława będzie rosła coraz bardziej.

Wydajne publikowanie prac o dużym wpływie na środowisko pracy. Współautor: w przypadku współpracy trudno i niezwykle ważne jest znalezienie we właściwym miejscu ważnego i opartego na współpracy współautora. Znajomość drugiego jest podstawą wszystkiego. Następnie opracowuje się i definiuje cel. Podział zadań: należy zawsze podsumowywać wszystkie decyzje podejmowane poprzez sporządzenie pisemnych szkiców.

Zbuduj obecność online, aby nadążać za czasami i zasobami technologicznymi, które na szczęście mamy do dyspozycji. Stworzenie nazwy nie będzie łatwe, ale dobra prezentacja online Twojej osoby jest doskonałą trampoliną do publikacji i rozpowszechniania Twoich prac badawczych.

Uszereguj czasopisma nad postępowaniami konferencyjnymi: dobrze, że praca badawcza jest zakończona przed jakąkolwiek prezentacją tego samego, podczas konferencji. Prezentacja uzyskanych wówczas wyników, podczas debat i konferencji, umożliwi dotarcie do jeszcze szerszej publiczności niż czasopisma.

Reklama w konferencjach znaczenie wzajemnego uznania. Piramida 5 S do prezentacji. Substancja (u podstaw każdej prezentacji naukowej); Struktura (jeśli praca musi respektować strukturę intro-metoda-rezultaty- wnioski; na konferencji ważne jest, aby być jasnym i bezpośrednim z publicznością); Historie pokazowe (krótkie, podlegające ocenie i interesujące, aby przekazać wiadomość opinii publicznej); Prelegent (obecność i postawa są bardzo ważne.

Publikowanie otwartego dostępu zwiększa wiarygodność, umożliwia możliwą współpracę; większą widoczność ze strony dużych firm i wydawców; dzielenie się wiedzą; więcej cytatów.

Przejrzyj pracę innych. Bądź krytyczny, ale zawsze bezstronny! Krytyka musi być konstruktywna i musi być w stanie wytworzyć więcej wiedzy.

Podsumowując, powtarzając, że przed podjęciem decyzji o tym, które czasopismo, nawet wielodyscyplinarne, lepiej opublikować, należy starannie rozważyć:

  • Redakcja
  • Reputacja czasopisma w swojej dyscyplinarnej dziedzinie.
  • Obieg czasopisma.
  • Współczynnik wpływu lub przynależność do klasy A.

Oto kilka przydatnych baz danych z bezpłatnym lub zarezerwowanym dostępem (do niektórych uniwersytetów) do informacji:

  • Journal of Citation Reports (baza danych o ograniczonym dostępie), która ocenia czasopisma naukowe poprzez przetwarzanie statystyk na podstawie analizy cytowań.
  • Scopus Journal Metrics (baza danych o ograniczonym dostępie), która zapewnia szybką i przejrzystą analizę postępów czasopisma.
  • Scimago Journal Rank wolna baza danych, która generuje statystyki dotyczące cytowań artykułów również na poziomie krajowym.
  • Narzędzie Elsevier Journal Finder opracowane przez Elsevier w celu wybrania najbardziej odpowiedniego dziennika, począwszy od abstraktu, który jest produkowany.
  • JournalGuide darmowa strona przydatna do łatwego i niezawodnego rozpoznawania wiarygodnych czasopism, gdzie z tytułu czasopisma możemy znaleźć linki do: strony internetowej czasopisma, instrukcji autora i strony Zgłoszenia.
  • Witryna ThinkCheckSubmit powstała z inicjatywy niektórych wydawców, aby ułatwić naukowcowi wybór wiarygodnych czasopism.

Podziel się wnioskami:

Note

1
Faggiolani C., Solimine G. (2012), Research evalua- tion, bibliometry and Bertoldo’s tree, in «AIB Studi», 52(1)
https://doi.org/10.2426/aibstudi-6290
2
Figà Talamanca A. (1999), How to “objectively” eval- uate the quality of scientific research: The case of the “Impact Factor”, in «Bulletin of the Italian Mathematical Union», Series 8, Vol. 2-A – Mathematics in Society and Culture (1999), 3, pp. 249-281, article presented at the Iv Seminar of the National Information System For Mathematics Sinm 2000: “A model of national information system for disciplinary areas”, Lecce, Monday 2 October 2000.
3
De Robbio A. (2009), Open Access as a strategy for evaluating intellectual productions, in «CIBER 1999-2009» Ledizioni, Milano, and “New Frontiers of Scientometry: Open Access as a Tool for Research Evaluation”, CNBA Seminar. “The weight of research. Evaluating a humanistic subject: Architecture, for example”, Bologna, 22 May 2009.
4
Daniel Torres-Salinas Lybrary Catalog Analysis as a tool in studies of social sciences and Humanities: An explorato- ry study of published book titles in Economics 2009,
5
Turbanti S. (2014), Navigating the sea of Scopus, Web of science and Google Scholar: the launch of a research on the vitality of Italian archival and librarianship disciplines, in «AIB Studi», 54(2/3)
https://doi.org/10.2426/aibstudi-10266
6
See for Area 14 http://www.sisec.it/wp-content/ uploads/2019/01/SISP_SISEC_Proposta-per-la-valuzione- delle-riviste-22-1-19.pdf proposed by Società Italiana di Political Science (SISP) and Italian Society of Economic Sociology (SISEC): in the conclusion “the integration of the two methods (peer judgment bibliometric indicators such as hindex) seems to us to offer the best system to ar- rive at a classification that holds together both the quali- tative-reputational and quantitative-citational aspects”.
Najczęściej czytane
W tym zeszycie