Content uploaded by Ryszard S Romaniuk
Author content
All content in this area was uploaded by Ryszard S Romaniuk on May 12, 2015
Content may be subject to copyright.
A preview of the PDF is not available
Czasopisma NT, Indeksy, Cytowania, Bazy danych, Wydawnictwa Cyfrowe, Bibliometria. Część 5
Abstract
ELEKTRONIKA, vol.56, no.5/2015, p.53-61;
Czasopisma NT, Indeksy, Cytowania, Bazy danych, Wydawnictwa Cyfrowe, Bibliometria. Część 5;
Technical and research journals are subject to fast changes, together
with the “internetization” i.e. digitization of the research, development
and some advanced industrial processes. The journals are any more
library paper collections, but only and exclusively as data bases of
very good or less good provenience. Data base quality is commeasurable
with the value of indexes evaluating the journal, and further,
with finances and popularity among the best authors from the
best research and technology centers, generating the best technical
data and knowledge. The journal of local character have o chances
to gain high indexes. In this country there was born an idea to establish
Polish Index for Local Research and Technical Journals. There is
carried out an intensive debate on the future of many journals in Poland,
and the ways of their publishing. This paper (in three parts) tries
to be a modest voice in this discussion. Part 1 debates: positioning,
citations, publishing law, open digital publishing. Part 2 debates: bibliometric
data bases and journal dilemma – go open or commercial.
Part 3 debates some critical questions what to do on the Polish technical
journal market. Part four and five gives and debates a number
of examples of bibliographic processes now active in Poland in R&D
EIT communities.
Czasopisma naukowo-techniczne podlegają szybkim zmianom, wraz
z „internetyzacją” tj. cyfryzacją, badań naukowych i innowacyjnych,
zaawansowanych procesów przemysłowych. Czasopisma współczesne
już obecnie nie liczą się zupełnie jako zbiory biblioteczne wydań
papierowych a tylko i wyłącznie jako bazy danych o bardzo dobrej
lub nieco słabszej proweniencji. Jakość bazy danych jest współmierna
z wysokością indeksów oceniających czasopismo, i dalej z wysokością
finansów i obłożeniem przez najlepszych autorów z najlepszych
ośrodków naukowych, generujących najlepsze wyniki naukowe
i techniczne. Czasopismom o charakterze lokalnym bardzo trudno
jest uzyskać wysokie wskaźniki bibliometryczne. W kraju zrodziła się
koncepcja powołania Polskiego Indeksu Czasopism Naukowych. Prowadzona
jest intensywna dyskusja nad przyszłością wielu czasopism
w kraju i sposobem ich wydawania. Seria artykułów jest przyczynkiem
do tej dyskusji. W części 1 poruszono zagadnienia pozycjonowania,
cytowania, polityki ustawodawcy, otwartych wydawnictw cyfrowych.
W części 2 poruszono zagadnienia naukowych baz danych i dylematu
czasopism wobec platform otwartych i komercyjnych. Część trzecia
jest otwartym krytycznym pytaniem co robić w kraju z czasopismami
naukowo-technicznymi i z ich oceną. Część czwarta i piąta podaje
i dyskutuje wiele przykładów procesów bibliometrycznych obecnie
zachodzących w kraju w środowisku NT EIT.
Ryszard S Romaniuk, Research bibliography and professional CV 1975-2020;
Życiorys zawodowy z wykazem publikacji;
Affiliation: Wydział Elektroniki i Technik Informacyjnych,
Politechnika Warszawska,
Faculty of Electronics and Information Technology,
Warsaw University of Technology, Poland;
Research area: research management and policies; large research infrastructures; Industry 4.0;
Research subjects: optics, optoelectronics and photonics, optical communications, electronics enginerring, ICT, FPGA, IoT, instrumentation for high energy physics experiments, free electon lasers, tokamaks, particle colliders, astrophysics/astroparticle, space/satellite engineering;
Research bibliography indexed in Elsevier Scopus, Web of Science - Clarivate Analytics, Google Scholar, Publons, Research Gate, Academia;
ELEKTRONIKA, vol.57, no.1/2016, p.52-56;
Digital Bibliometrics,
Bibliometria Cyfrowa, Część 6 (doi:10.15199/13.2016.1.10),
Nie bez powodu współczesna bibliometria cyfrowa budzi
emocje. O bibliometrii można mówić i pisać albo emocjonalnie
dobrze, źle, albo merytorycznie, z dystansem, z pogłębioną
refleksją. W cyklu artykułów na ten temat opublikowanych
ostatnio w Elektronice nr 7, 8, 10/2014 oraz 3, 5/2015, pisano
wykorzystując wszystkie trzy sposoby. Narzędzia bibliometrii
starano się opisać w miarę obiektywnie, zapewne nie uniknięto
subiektywizmu w opisie stanu obecnego i perspektywicznej
roli bibliometrii cyfrowej w niedalekiej przyszłości. W niniejszej
części cyklu dyskutowane są ponownie wybrane ważniejsze
narzędzia niezwykle dynamicznie globalnie rozwijającej się
bibliometrii cyfrowej. To właśnie przez te narzędzia czujemy
działanie bibliometrii cyfrowej „na własnej skórze”. Narzędzia
te były opisywane poprzednio, ale zmiany zachodzą tak dynamiczne,
że warto do nich wrócić jeszcze raz i pokazać dynamikę
tych procesów napędzaną znacznym kapitałem publicznym
i prywatnym, dopasowanym zadziwiająco optymalnie do
ogromnego popytu na bibliometrią cyfrową.
Globalnymi potentatami w obszarze bibliometrii są firmy
prywatne – Thomson Reuters oraz Elsevier. Oferują oni
na zasadzie subskrypcji szereg środowisk i narzędzi bibliometrycznych.
Części tej oferty nazywane są, śladem świata
bankowego, produktami. Produkty są oferowane klientom.
Czyste zasady rynkowe, czysty biznes. Wydawanie czasopisma
i inne podobne działania nazywane jest w tej nomenklaturze
projektami. Potęga tego biznesu polega na tym, że
produkty i projekty są globalne, dobrze przemyślane i stają
się standardami, oczekiwanymi standardami. W tworzeniu
globalnego rynku bibliometrycznego, obecnie o wartości miliardów
Euro, uczestniczy wielu graczy: producenci standardów,
wydawnictwa, globalne bazy danych, szkoły wyższe,
organizacje i instytucje naukowe, stowarzyszenia naukowe,
czasopisma naukowe, a także sami uczeni. Jest duży popyt
na bibliometrię cyfrową, jest i podaż na zasadach rynkowych.
Wokół tego twardego rynku silnej konkurencji budowane są
struktury wspomagające, uzupełniające, społeczne, środowiskowe
– zawodowe. Tworzony jest pełen system, już na tyle
dojrzały że w pełni akceptowany przez rynek i uzupełniający
naukę, z której żyje. System jest legitymizowany przez rządy
wielu krajów. W Polsce indeksy H - Hirscha, IF – Impact
Factor, N – liczba publikacji na liście JCR, C – liczba cytowań
i inne pochodne zostały wbudowane w system legislacyjny
i kategoryzacyjny nauki. Jeszcze kilka lat temu było to nie do
pomyślenia.
ELEKTRONIKA, vol.57, no.2/2016, p.35-41;
Bibliometria cyfrowa (Digital bibliometrics)
(doi:10.15199/13.2016.2.7)
O bibliometrii można mówić i pisać albo emocjonalnie dobrze, źle, albo merytorycznie, z dystansem, z pogłębioną refleksją. W cyklu
artykułów na ten temat opublikowanych w Elektronice: 7, 8, 10-
2014, 3, 5-2015, oraz 1-2016, pisano wykorzystując wszystkie trzy
sposoby. Niniejszy artykuł kończy cykl, nie stanowiąc jednak jego
podsumowania. Pokazuje nadal różne strony bibliometrii, dość
efektywnie (czasami bezwzględnie, nieuczciwie, często interesownie,
rzadziej altruistyczne) wykorzystywane zarówno przez duży
biznes wydawniczy do robienia interesów ekonomicznych i w zakresie
polityki naukowej, instytucje do obowiązkowej kategoryzacji,
jak i osoby fizyczne do obowiązkowej oceny i celów prywatnych.
Dynamicznie rozwijane przez liderów tego rynku narzędzia bibliometryczne
ustanawiają niemal z dnia na dzień nowe standardy
które, jeśli udane, globalizują się natychmiast. Opisujemy niektóre
z tych przyjmujących się standardów, niejednokrotnie w burzliwy
sposób. Przerywamy cykl na tych trendach rozwojowych i narzędziach
bibliometrii cyfrowej początku AD2016, a powrócimy do tej
niewątpliwie fascynującej tematyki w miarę możliwości i potrzeb.
Bibliometrix may be spoken and/or written about bad, good or seriously
analytically with some distance and deepened reflection.
A series of papers devoted to digital and analog bibliometrics published
in Elektronika Journal: : 7, 8, 10-2014, 3, 5-2015 treated
the subject in all three mentioned ways. This papers ends the
cycle, however, is neither a wrap-up nor a general conclusion. It
shows again various sides of bibliometrics, quite efficiently (sometimes
ruthlessly, dishonestly, frequently showing selfishness,
rarely being altruistic) used by large publishing business to make
financial profits and create favourable research policy, by research
institutions for obligatory evaluation, and by researchers for also
obligatory personal evaluation and private purposes. Dynamically
developed tools by the bibliometrics market leaders create almost
from day to day new standards which, when accepted, undergo
globalization almost immediately. W describe some of these recently
globalized standards. This paper ends for now this article
cycle on development trends and bibliometrics tools as for the
beginning of AD2016. We will return inevitably to this fascinating
subject in case of need.
Bibliometria cyfrowa - część 7
(Digital bibliometrics)
Abstract
Bibliometrics may be spoken and/or written about bad, good or seriously
analytically with some distance and deepened reflection.
A series of papers devoted to digital and analog bibliometrics published
in Elektronika Journal: : 7, 8, 10-2014, 3, 5-2015 treated
the subject in all three mentioned ways. This papers ends the
cycle, however, is neither a wrap-up nor a general conclusion. It
shows again various sides of bibliometrics, quite efficiently (sometimes
ruthlessly, dishonestly, frequently showing selfishness,
rarely being altruistic) used by large publishing business to make
financial profits and create favourable research policy, by research
institutions for obligatory evaluation, and by researchers for also
obligatory personal evaluation and private purposes. Dynamically
developed tools by the bibliometrics market leaders create almost
from day to day new standards which, when accepted, undergo
globalization almost immediately. W describe some of these recently
globalized standards. This paper ends for now this article
cycle on development trends and bibliometrics tools as for the
beginning of AD2016. We will return inevitably to this fascinating
subject in case of need.
Keywords: bibliometrics, scientometrics, digital evaluation of research
achievements, research institution categorization, digital
publishers, social capital
Streszczenie
O bibliometrii można mówić i pisać albo emocjonalnie dobrze, źle,
albo merytorycznie, z dystansem, z pogłębioną refleksją. W cyklu
artykułów na ten temat opublikowanych w Elektronice: 7, 8, 10-
2014, 3, 5-2015, oraz 1-2016, pisano wykorzystując wszystkie trzy
sposoby. Niniejszy artykuł kończy cykl, nie stanowiąc jednak jego
podsumowania. Pokazuje nadal różne strony bibliometrii, dość
efektywnie (czasami bezwzględnie, nieuczciwie, często interesownie,
rzadziej altruistyczne) wykorzystywane zarówno przez duży
biznes wydawniczy do robienia interesów ekonomicznych i w zakresie
polityki naukowej, instytucje do obowiązkowej kategoryzacji,
jak i osoby fizyczne do obowiązkowej oceny i celów prywatnych.
Dynamicznie rozwijane przez liderów tego rynku narzędzia bibliometryczne
ustanawiają niemal z dnia na dzień nowe standardy
które, jeśli udane, globalizują się natychmiast. Opisujemy niektóre
z tych przyjmujących się standardów, niejednokrotnie w burzliwy
sposób. Przerywamy cykl na tych trendach rozwojowych i narzędziach
bibliometrii cyfrowej początku AD2016, a powrócimy do tej
niewątpliwie fascynującej tematyki w miarę możliwości i potrzeb.
Słowa kluczowe: bibliometria, naukometria, ocena osiągnięć naukowych,
kategoryzacja instytucji naukowych, wydawnictwa cyfrowe,
kapitał społeczny
Dudczyk J., Zielińska M., Wachowiak F.: Rola ergonomii w procesie konstruowania modułowego integratora do zarządzania systemem C4I żołnierza.
Elektronika (VVII), nr 1.2016, s .47
Niniejszy artykuł opisuje proces oceny ergonomicznej w ramach prac projektowych i konstrukcyjnych nad Modułowym Integratorem do zarządzania systemem C4I (ang. Command, Control, Communications, Computers and Intelligence) żołnierza. Przedstawia wymagania regulowane przez Normy Obronne, zalecenia ergonomii i optymalizacji, prezentując jednocześnie wykorzystaną metodologię, przebieg badań ergonomicznych oraz uzyskane wyniki. Modułowy Integrator to urządzenie, które scala w jednej obudowie radiostację osobistą żołnierza, komputer oraz system zasilania, co nadaje mu cechę „wielopostaciowości funkcjonalnej”. Głównym zadaniem tego urządzenia jest połączenie sygnałów otrzymywanych z różnych źródeł i sensorów systemu C4I żołnierza, zapewnienie dostępu do elementów osprzętu optoelektronicznego i radioelektronicznego, umożliwienie czytelnego zobrazowania sytuacji taktycznej, sterowanie transmisją danych, obrazem oraz fonią przy użyciu wewnętrznego modułu radiostacji, zapewniając jednocześnie efektywne wykorzystanie pasma radiowego w kanale o dużej przepustowości i pracę w terenie zurbanizowanym.
Pierwszym etapem w procesie oceny i badań ergonomicznych było opracowanie indywidualnych, konkretnych wymagań ergonomicznych stawianych Modułowemu Integratorowi. W tym celu konieczne było przeprowadzenie analizy ryzyka, uwzględniającej wskazywane przez ergonomię cechy deterministyczne w tym: potrzeby i oczekiwania przyszłych użytkowników, parametry techniczne, funkcjonalność i planowane zastosowanie urządzenia. Konkretne charakterystyki i wartości liczbowe parametrów ergonomicznych zostały ustalone w zależności od przeznaczenia, cech charakterystycznych konstrukcji oraz funkcjonalności. Korzystając z narzędzi analitycznych takich jak FMEA (ang. Failure Mode and Effect Analysis), QFD (ang. Quality Function Deployment) czy Diagram Ishikawy wyselekcjonowano czynniki ergonomiczne, które mają wpływ na ergonomię urządzenia, w tym: antropometria I personalizacja, siła nacisku, komfort termiczny, rozmieszczenie w systemie przenoszenia, poręczność technologiczna oraz instrukcja obsługi. Dzięki temu został opracowany Program i Metodyka Badań dla zaprojektowanego urządzenia. W ramach analizy ergonomicznej Modułowego Integratora, przeprowadzono pomiary laboratoryjne, ocenę ekspercką zastosowanych rozwiązań oraz wywiad z grupą testerów – przedstawicieli użytkowników
ROMANIUK R.S.: Bibliometria cyfrowa. Część 6
(Digital bibliometrics);
Elektronika (LVII), nr 1/2016, s. 52-56
DOI: 10.15199/13.2016.1.10
O bibliometrii można mówić i pisać albo emocjonalnie dobrze, źle,
albo merytorycznie, z dystansem, z pogłębioną refleksją. W cyklu
artykułów na ten temat opublikowanych ostatnio w Elektronice, nr
7, 8, 10/2014 oraz 3, 5/2015, pisano wykorzystując wszystkie trzy
sposoby. Narzędzia bibliometrii starano się opisać w miarę obiektywnie,
zapewne nie uniknięto subiektywizmu w opisie stanu obecnego
i perspektywicznej roli bibliometrii cyfrowej w niedalekiej przyszłości.
W niniejszej części cyklu dyskutowane są wybrane ważniejsze narzędzia
niezwykle dynamicznie globalnie rozwijającej się bibliometrii
cyfrowej. To właśnie przez te narzędzia czujemy działanie bibliometrii
cyfrowej „na własnej skórze”.
Słowa kluczowe: bibliografia cyfrowa, bibliometria cyfrowa, naukometria,
ocena parametryczna jednostek i osób, indeksy bibliometryczne,
czasopisma naukowe, nauki techniczne, elektronika i telekomunikacja
ROMANIUK R.S.: Bibliometrics. Part 6
Elektronika (LVII), no 1/2016, p. 52-56
DOI: 10.15199/13.2016.1.10
Bibliometrics may be spoken and/or written about bad, good or seriously
analytically with some distance and deepened reflection. A series
of papers devoted to digital and analog bibliometrics published in
Elektronika Journal: 7, 8, 10–2014, 3, 5–2015 treated the subject in all
three mentioned ways. We tried to describe bibliometrics tools in as
objective way as possible. However, a lot of subjectivity was not possible
to be avoided in the description of the current status of bibliometrics,
and its perspective role in the near future. This part of the cycle
of papers debates chosen, perhaps the most important, tools and toys
of extremely fast developing digital bibliomterics. Due to these tools
we feel the digital bibliometrics action on our faces.
Keywords: digital bibliography, digital bibliometrics, scientometrics,
parametric evaluation of research institutions, scientists and researchers,
bibliometric indexes, research journals, technical sciences,
electronics and telecommunications
ELEKTRONIKA, vol.57, no.1/2016, p.52-56;
Bibliometria cyfrowa (Digital bibl,iometrics);
Nie bez powodu współczesna bibliometria cyfrowa budzi
emocje. O bibliometrii można mówić i pisać albo emocjonalnie
dobrze, źle, albo merytorycznie, z dystansem, z pogłębioną
refleksją. W cyklu artykułów na ten temat opublikowanych
ostatnio w Elektronice nr 7, 8, 10/2014 oraz 3, 5/2015, pisano
wykorzystując wszystkie trzy sposoby. Narzędzia bibliometrii
starano się opisać w miarę obiektywnie, zapewne nie uniknięto
subiektywizmu w opisie stanu obecnego i perspektywicznej
roli bibliometrii cyfrowej w niedalekiej przyszłości. W niniejszej
części cyklu dyskutowane są ponownie wybrane ważniejsze
narzędzia niezwykle dynamicznie globalnie rozwijającej się
bibliometrii cyfrowej. To właśnie przez te narzędzia czujemy
działanie bibliometrii cyfrowej „na własnej skórze”. Narzędzia
te były opisywane poprzednio, ale zmiany zachodzą tak dynamiczne,
że warto do nich wrócić jeszcze raz i pokazać dynamikę
tych procesów napędzaną znacznym kapitałem publicznym
i prywatnym, dopasowanym zadziwiająco optymalnie do
ogromnego popytu na bibliometrią cyfrową.
ELEKTRONIKA, vol.55, 2014,
part 1: no.7, p.168-176;
part 2; no.8, p.91-101;
Czasopisma NT, Indeksy, Cytowania, Bazy danych, Wydawnictwa Cyfrowe, Bibliometria. Część 1 i Część 2;
Indeksy, cytowania, bibliometria, ocena parametryczna jednostek naukowych, ocena osobista dorobku uczonych są przedmiotem
zainteresowania środowiska naukowego, choćby ze względu na
powiązanie tych funkcji i parametrów z procesami legislacyjnymi
dotyczącymi nauki w naszym kraju. Jesteśmy świadkami, a niektórzy
z nas uczestnikami i autorami, intensywnych przemian
w sposobie wydawania czasopism naukowo-technicznych (NT).
Czasopisma NT podlegają szybkim zmianom, wraz z „internetyzacją”
tj. cyfryzacją, informatyzacją, badań naukowych i powiązanych
z badaniami i innowacjami, zaawansowanych procesów
przemysłowych. Czasopisma te już obecnie nie liczą się praktycznie
prawie zupełnie jako zbiory biblioteczne wydań papierowych
(jedynie jako zbiory historyczne) a tylko i wyłącznie jako bazy danych
o bardzo dobrej, tylko dobrej, lub nieco słabszej proweniencji.
Historyczne wydania są coraz częściej w pełni digitalizowane
i archiwizowane. Większość czołowych wydawnictw zarchiwizowało
kolekcje swoich czasopism NT.
Jakość bazy danych (według instytucji finansujących badania
i administracji nauki) jest współmierna z wysokością indeksów
oceniających czasopismo, i dalej z wysokością finansów i obłożeniem
przez najlepszych autorów z najlepszych ośrodków naukowych,
generujących najlepsze wyniki naukowe i techniczne.
Czasopismom o charakterze lokalnym bardzo trudno jest uzyskać
wysokie wskaźniki bibliometryczne. W kraju zrodziła się koncepcja
powołania Polskiego Indeksu Czasopism Naukowych. Do
takiej roli aspiruje prawdopodobnie Index Copernicus (IC Journal
Master List), ale nie tylko, także inne. Powstaje duży portal
krajowy zarządzania nauką Pol-ON, w ramach którego mogą być
zapewne tworzone mechanizmy tworzenia ocen i indeksów instytucji,
wydawnictw, czasopism i osób.
ELEKTRONIKA, vol.55, 2014,
part 1: no.7, p.168-176;
part 2; no.8, p.91-101;
Bibliometry;
W części pierwszej artykułu omówiono pobieżnie kilka następujących
zagadnień: czasopisma NT w erze dynamicznych mediów
cyfrowych, wersja papierowa a bazodanowa czasopism,
wirtualne czytelnie, zdrowe ambicje lokalnych czasopism NT
wejścia do globalnych baz danych, polityka ustawodawcy dotycząca
rynku wydawniczego czasopism naukowo-technicznych
w kraju, otwarte wydawnictwa cyfrowe, czasopisma międzynarodowych
organizacji NT, krajowe czasopisma NT, krajowy
rynek wydawniczy czasopism NT, cytowania, pozycjonowanie
(lokowanie) czasopism, indeksy bibliometryczne, licencjonowanie
prawno-autorskie CCL, e-wydawnictwa krajowych czasopism
NT – pytania z odpowiedziami i bez. W części drugiej
ten pobieżny wywód jest kontynuowany z ukierunkowaniem na
poważny dylemat wyboru czasopism wobec ryku wydawniczego
otwartego i komercyjnego. Ponadto przedstawiono listę baz
danych e-nauki i bibliograficznych oraz glosariusz wybranych
terminów bibliograficznych.
ELEKTRONIKA 10/2014, vol.55, p.97-111;
Czasopisma NT, Indeksy, Cytowania, Bazy danych, Wydawnictwa Cyfrowe, Bibliometria. Część 3,
Nauka i technika to delikatny system naczyń połączonych.
Znamy elementy tego systemu – edukacja, dydaktyka, kształcenie
ustawiczne, uczelnie, instytuty, laboratoria, stowarzyszenia
zawodowe, organizacje naukowe, projekty badawcze
i techniczne, programy współpracy z przemysłem innowacyjnym,
naukowo-techniczne spin-offy, wdrożenia, naukowe,
bazy danych, czasopisma i publikacje, raporty techniczne,
e-nauka, wielka międzynarodowa infrastruktura badawcza
będąca obecnie generatorem głównych odkryć (niestety poza
Polską). Jeśli silnie podkreślimy rolę innowacji, to praktycznie
dochodzi do tego systemu naczyń połączonych także innowacyjny
business i przemysł. W tym systemie najważniejsi
są ludzie. Pracują oni w określonych np. sprzyjających warunkach
i generują pewne rezultaty, które są przydatne dla
rozwoju społecznego, generacji dobrobytu, zdrowia, bezpieczeństwa,
kultury, gospodarki, także i samej nauki. Trzeba
te rezultaty mierzyć. Powstaje dziedzina tym się zajmująca
– naukometria, scientometria [1–2]. Jej znaczną częścią jest
bibliometria [4, 13–14]. Rozwijają się powszechne koncepcje
Otwartej Nauki aby rezultaty naukowe i ich metryki były dostępne
powszechnie [3, 5–7]. Elementem Otwarten Nauki są
Otwarte Publikacje i Otwarty Dostęp do wyników badań naukowych.
Ważnym elementem scientometrii i bibliometrii są
czasopisma naukowe [20]. Dlaczego są ważne? Między innymi
dlatego, że decydują w znacznym stopniu o parametryzacji
jednostek naukowych, a obecnie także o karierach osobistych
indywidualnych pracowników nauki.
I propose the index h, defined as the number of papers with citation number ≥h, as a useful index to characterize the scientific output of a researcher.
• citations
• impact
• unbiased
- R S Romaniuk
- N T Czasopisma
- Indeksy
- Bazy Cytowania
- Wydawnictwa Danych
- Cyfrowe
R.S.Romaniuk, Czasopisma NT, Indeksy, Cytowania, Bazy danych, Wydawnictwa Cyfrowe, Bibliometria, część 4, Elektronika,
no.3, str. 90-95, 2015, doi:10.15199/13.2015.4.10.
Research Policy. European Commission
Assessing Europe's University-Based Research -Expert Group
on Assessment of University-Based Research. (2010). Research
Policy. European Commission. doi:10.2777/80193.